Tek cevap neden yanıltır; bahsedilme, sıra ve kaynak

Bu derste

Birçok ekip AI görünürlüğünü şöyle "ölçer": ChatGPT'yi açar, bir soru sorar, ekran görüntüsü alır. Bu derste bunun neden yeterli olmadığını, gerçek bir ölçümün neye benzediğini ve tek bir cevabı okurken hangi üç ölçüye bakacağınızı görüyoruz.

Tek sorgu neden yanıltır

Tek bir cevap, bir kişinin bir anda gördüğü tek bir örnektir. Aynı soru başka bir tarihte, başka bir model sürümünde, başka bir konumda veya başka bir hesapta farklı bir cevap getirebilir. Aynı cevabın tekrar edeceğinin bir garantisi yoktur.

İki yaygın yanlış sonuç:

• "AI bizi tanımıyor." Bir kez sordunuz, adınız çıkmadı. Belki o gün, o cevapta çıkmadınız; başka cevaplarda çıkıyor olabilirsiniz.
• "AI bizi birinci öneriyor." Bir kez sordunuz, adınız ilk satırda çıktı. Bu da tek bir örnektir; genel durumu göstermez.

Ekran görüntüsü üstelik tarih, motor ve konum bilgisini çoğu zaman taşımaz. Bir hafta sonra aynı görüntüyle karşılaştırma yapamazsınız.

Ölçüm neye benzer

Güvenilir bir ölçümün birkaç sabit parçası vardır:

• Sabit bir soru kümesi. Her hafta aynı markasız sorular sorulur.
• Sabit bir rakip kümesi. SOV'un paydası her hafta aynı onaylı rakiplerden oluşur.
• Aynı zaman penceresi. Ücretli planlarda resmî SOV, beş motorun aynı pencerede sorulduğu haftalık ölçümden gelir.
• Kayıtlı durumlar. Her deneme cevaplandı, AI cevabı yok, reddetti veya ölçülmedi olarak kaydedilir (3. ders).
• Tarih. Her sonuç, belirli bir tarihte dönen cevapların örneklemidir.

Ücretli planlardaki günlük öncelikli kontroller (ChatGPT ve Google AI Overviews) ise erken sinyaldir. Ayrı gösterilir ve haftalık SOV'a hiçbir zaman karıştırılmaz.

Bir sorunun metnini veya rakip kümesini değiştirirseniz yeni bir sürüm oluşur. Haftadan haftaya değişim yalnız iki hafta aynı soru seti, rakip kümesi, kapsam ve motor yapılandırmasıyla ölçüldüyse ve iki haftada da beş motor sağlıklıysa gösterilir. Aksi hâlde değişim gösterilmez ve nedeni yazılır. Bunu Modül 6'da ayrıntılı göreceğiz.

Bir cevapta üç ölçü

Tek bir cevap genel durumu göstermez, ama doğru okunursa ölçümün yapı taşlarını gösterir. Her cevapta üç ayrı şeye bakılır.

1. Bahsedilme

Markanız cevapta geçiyor mu, kaç kez geçiyor, rakipleriniz kaç kez geçiyor? SOV Skoru ve Keşif Görünürlüğü bu bilgiden hesaplanır (1. ve 2. dersler).

2. Belirginlik (sıra)

Belirginlik (Prominence), markanızın ilk geçerli anılmasının cevabın neresinde olduğunu gösterir: 1 (erken) ile 10 (geç) arasında.

Dikkat edilecek üç nokta:

• Bu bir liste sırası veya pazar sıralaması değildir; cevabın içindeki konumdur.
• Marka hiç geçmiyorsa belirginlik uygulanmaz. Sıfır sayılmaz.
• Belirginlik ayrı bir sinyaldir; SOV'a veya Keşif Görünürlüğü'ne karıştırılmaz. Erken anılmak SOV'u artırmaz.

3. Kaynak / atıf

Bazı motorlar cevabın dayandığı kaynakları yapılandırılmış biçimde döndürür. Owned-Site Citation Coverage, kaynak kanıtı alınabilmiş cevapların kaçında markanın kendi sitesine atıf verildiğini gösterir.

• Kaynak kanıtını desteklemeyen motorlar ve kanıtı alınamayan cevaplar paydaya girmez, sıfır sayılmaz; kanıtı alınmış ama kendi sitenizi göstermeyen ya da hiç kaynak göstermeyen cevap ıska sayılır.
• Cevap metninin içine yazılmış bir web adresi, motorun kaynak kanıtı sayılmaz.
• Atıf, markanın önerildiği anlamına gelmez.

Anılmak, önerilmek değildir

Bir cevapta adınızın geçmesi, AI'ın sizi önerdiği anlamına gelmez. "Acme Spor da bu bölgede bir seçenek" ile "Acme Spor'u öneririm" aynı şey değildir. Öneri ayrı bir ölçüdür ve yalnız tavsiye veya satın alma seçimi sorusu olarak önceden etiketlenmiş sorularda ölçülür. Doğrulanmış bir öneri sınıflandırıcısı devreye girene kadar bu ölçü 'ölçülmedi' olarak görünür; anılma sayısı onun yerine kullanılmaz.

Çalışılmış örnek (temsilî)

Aşağıdaki cevap kurgusaldır; gerçek bir motor çıktısı değildir.

Soru: "Kadıköy'de koşu ayakkabısı almak için hangi mağazalara bakmalıyım?"

"Geniş numara seçeneği arıyorsanız Rakip A öne çıkıyor. Uygun fiyat için Rakip B'ye ve büyük bir pazar yerindeki mağazalara bakabilirsiniz. Koşu analizi yaptırmak isterseniz Acme Spor da bu bölgede bir seçenek." Kaynaklar: bir pazar yeri kategori sayfası, bir şikâyet sitesindeki yorum sayfası, acmespor.example

Okuma:

• Bahsedilme: Acme Spor 1, Rakip A 1, Rakip B 1. Pazar yeri onaylı rakip değil, bir satış kanalı; SOV paydasına girmez.
• Belirginlik: Acme Spor'un ilk anılması cevabın son cümlesinde; geç bir konum.
• Kaynak: Motor üç kaynak döndürdü, biri Acme Spor'un kendi sitesi. Bu cevap, kendi siteye atıf verilen cevaplar arasında sayılır.
• Öneri: Acme Spor anıldı ama açıkça önerilmedi.

Bu tek cevaptan "Acme Spor'un SOV'u %33" sonucu çıkarılmaz. Bu yalnız bir örnektir. SOV, ölçüm penceresindeki bütün uygun cevapların bahsedilmeleri toplanarak hesaplanır.

Tanımlar: Prominence, Owned-Site Citation Coverage, kaynak kanıtı, ölçtüğümüzü iddia etmediğimiz şeyler.

Özet

• Tek bir cevap veya ekran görüntüsü bir örnektir; aynı cevabın tekrar edeceğinin garantisi yoktur.
• Güvenilir ölçüm: sabit soru ve rakip kümesi, aynı zaman penceresi, kayıtlı durumlar, tarih.
• Bahsedilme SOV ve Keşif Görünürlüğü'nü besler.
• Belirginlik (sıra) cevaptaki ilk anılmanın konumudur (1 erken, 10 geç); marka yoksa uygulanmaz, SOV'a karışmaz.
• Kaynak/atıf yalnız motorun döndürdüğü kaynak kanıtıyla ölçülür; kanıt yoksa sıfır sayılmaz. Anılmak da atıf da önerilmek demek değildir.