Deney Sorusu ve Kapsamı
GEO çalışmalarında yalnızca markanın bir AI yanıtında görünüp görünmediğini izlemek yeterli değildir. Daha açıklayıcı soru şudur: Belirli bir konu, kullanıcı amacı ve kaynak kümesi için içerik hangi koşullarda alıntılanıyor, özetleniyor, öneriliyor veya tamamen dışarıda kalıyor?
İlk deneyi dar ve tekrarlanabilir bir kapsamla tanımlayın:
Kontrol Grubu ve İçerik Varyantları
Sayfayı değiştirmeden önce mevcut sürümü kontrol grubu olarak arşivleyin. Test sürümünde hangi değişkenin değiştirildiğini açıkça yazın. Örneğin yalnızca kanıt düzenini iyileştiren bir varyant ile başlık, ana iddia ve kapsamı da değiştiren bir varyantı aynı deneyde karşılaştırmayın.
Kaynaklanabilirliği test eden bir varyantta şu düzenlemeler değerlendirilebilir:
Ölçüm Şeması ve Kayıt Alanları
Her gözlemi aynı formatta kaydetmek, öznel değerlendirmeleri azaltır. Basit bir çalışma tablosu şu alanları içerebilir:
Marka görünürlüğünü tek bir ikili alanla sınırlamak yerine, görünüm türünü de kaydedin. Örneğin marka yalnızca yanıt metninde geçebilir, kaynak olarak listelenebilir, belirli bir iddiayı destekleyebilir veya bağlam dışı anılabilir. Kaynak URL’si gösterilmiyorsa bunu ayrıca belirtin; tahmin edilen ya da dolaylı bir URL’yi doğrulanmış kaynak gibi yazmayın.
İddia uyumu için deneyden önce sabit bir ölçek tanımlayın:
Entity Sinyalleri ve Yapılandırılmış Veri Kontrolü
Marka, kişi, ürün veya kuruluş bilgisi güvenilir temas noktalarında tutarlı sunulmalıdır. Resmî alan adı, ad yazımı, açıklama, logo, kuruluş türü, kurucu bilgisi, ürün kategorisi ve ilgili profillerdeki farklılıkları listeleyin. Aynı varlık için birbirinden kopuk veya çelişkili tanımlar kullanılması, sistemlerin varlık bağlamını değerlendirmesini zorlaştırabilir.
Yapılandırılmış veri denetiminde şu soruları kullanın:
Sonuçların Yorumlanması ve Sonraki Deney
Küçük örneklemlerde tek bir yanıtın değişmesi anlamlı bir kazanım göstermeyebilir. Sonuçları sorgu amacı, konu zorluğu, kaynak türü, tarih ve arayüz bakımından segmentlere ayırın. Başarı ölçütünü deneye başlamadan önce belirleyin; örneğin yalnızca görünme oranını değil, doğrudan desteklenen iddiaların oranını da izleyin.
Bir varyantı başarılı saymadan önce aynı ölçütlerle tekrarlı gözlem yapın. Değişimin hangi faktörden kaynaklanmış olabileceğini yazılı olarak açıklayın ve belirsizlikleri rapora ekleyin. Negatif sonuç da değerlidir: Kaynak düzeni değiştiği halde görünürlük artmadıysa sayfa konusu, kaynak otoritesi, entity tutarlılığı, teknik erişilebilirlik veya sorgu niyeti yeniden incelenebilir.
Sonraki deneyde mümkünse tek bir ana değişkeni değiştirin. İçerik yapısı, kaynak kalitesi, entity düzeni ve yapılandırılmış veriyi aynı anda değiştirmek nedensel yorumu zayıflatır. Deney günlüğünde sürüm, değişiklik tarihi, sorgu kümesi, gözlem sayısı ve karar gerekçesini saklayarak sonuçları daha sonra yeniden doğrulayın.
GEO çalışmalarında yalnızca markanın bir AI yanıtında görünüp görünmediğini izlemek yeterli değildir. Daha açıklayıcı soru şudur: Belirli bir konu, kullanıcı amacı ve kaynak kümesi için içerik hangi koşullarda alıntılanıyor, özetleniyor, öneriliyor veya tamamen dışarıda kalıyor?
İlk deneyi dar ve tekrarlanabilir bir kapsamla tanımlayın:
- Tek bir konu kümesi ve açık bir kullanıcı amacı seçin.
- Marka adı içeren sorguları, marka adı içermeyen keşif sorgularından ayırın.
- Bilgilendirici, karşılaştırmalı ve işlem odaklı sorguları ayrı segmentlerde inceleyin.
- Sorgunun tam metnini, gözlem tarihini, ülke ve dili, kullanılan arayüzü ve mümkünse oturum koşullarını kaydedin.
- İncelenen kaynak sayfalarının yayın veya güncelleme tarihlerini not edin.
Kontrol Grubu ve İçerik Varyantları
Sayfayı değiştirmeden önce mevcut sürümü kontrol grubu olarak arşivleyin. Test sürümünde hangi değişkenin değiştirildiğini açıkça yazın. Örneğin yalnızca kanıt düzenini iyileştiren bir varyant ile başlık, ana iddia ve kapsamı da değiştiren bir varyantı aynı deneyde karşılaştırmayın.
Kaynaklanabilirliği test eden bir varyantta şu düzenlemeler değerlendirilebilir:
- Ana iddiayı kısa, doğrudan ve bağlamı korunmuş bir paragrafta ifade etmek.
- Tanım, yöntem, bulgu, sınırlılık ve sonuç bölümlerini birbirinden ayırmak.
- İstatistiksel veya teknik iddiaların yanında, iddiayı gerçekten destekleyen birincil ya da güvenilir ikincil kaynağa bağlantı vermek.
- Kurum, ürün, yöntem ve konu adlarını metin boyunca tutarlı kullanmak.
- Tablo veya listelerde ölçüm birimini, dönemi, örneklemi ve kapsamı belirtmek.
- Yazarın uzmanlığı, kullanılan yöntem ve olası çıkar çatışmaları hakkında yeterli bağlam sağlamak.
Ölçüm Şeması ve Kayıt Alanları
Her gözlemi aynı formatta kaydetmek, öznel değerlendirmeleri azaltır. Basit bir çalışma tablosu şu alanları içerebilir:
query_id | tarih | arayüz | sorgu | amaç | marka_görünürlüğü | kaynak_gösterildi_mi | kaynak_url | iddia_uyumu | cevap_kapsamı | not
Marka görünürlüğünü tek bir ikili alanla sınırlamak yerine, görünüm türünü de kaydedin. Örneğin marka yalnızca yanıt metninde geçebilir, kaynak olarak listelenebilir, belirli bir iddiayı destekleyebilir veya bağlam dışı anılabilir. Kaynak URL’si gösterilmiyorsa bunu ayrıca belirtin; tahmin edilen ya da dolaylı bir URL’yi doğrulanmış kaynak gibi yazmayın.
İddia uyumu için deneyden önce sabit bir ölçek tanımlayın:
- 0: Kaynak yok, konu dışı veya iddiayı desteklemiyor.
- 1: Konuyla kısmen ilişkili, ancak ana iddiayı doğrulamıyor.
- 2: Ana iddiayı doğrudan ve yeterli bağlamla destekliyor.
- Marka veya entity adının görünme oranı.
- Kaynak olarak gösterilme oranı.
- Kaynakların iddia uyumu ortalaması.
- Yanıtta desteklenen alt konu sayısı.
- Kaynak gösterilen sayfaların konu ve amaç segmentlerine göre dağılımı.
- Aynı sorgunun farklı tarihlerdeki yanıtları arasındaki değişkenlik.
Entity Sinyalleri ve Yapılandırılmış Veri Kontrolü
Marka, kişi, ürün veya kuruluş bilgisi güvenilir temas noktalarında tutarlı sunulmalıdır. Resmî alan adı, ad yazımı, açıklama, logo, kuruluş türü, kurucu bilgisi, ürün kategorisi ve ilgili profillerdeki farklılıkları listeleyin. Aynı varlık için birbirinden kopuk veya çelişkili tanımlar kullanılması, sistemlerin varlık bağlamını değerlendirmesini zorlaştırabilir.
Yapılandırılmış veri denetiminde şu soruları kullanın:
- İşaretleme, sayfada kullanıcıya görünen içeriği doğru yansıtıyor mu?
- Zorunlu ve önerilen alanlar geçerli, güncel ve bağlama uygun mu?
- Aynı entity için farklı sayfalarda çelişkili bilgiler bulunuyor mu?
- İşaretleme, sayfanın asıl amacıyla uyumlu mu?
- Yapısal doğrulamanın ardından sayfa içeriği, başlık ve kanonik URL birlikte incelendi mi?
- İşaretlenen bilgi kullanıcı deneyiminde de açıkça görülebiliyor mu?
Sonuçların Yorumlanması ve Sonraki Deney
Küçük örneklemlerde tek bir yanıtın değişmesi anlamlı bir kazanım göstermeyebilir. Sonuçları sorgu amacı, konu zorluğu, kaynak türü, tarih ve arayüz bakımından segmentlere ayırın. Başarı ölçütünü deneye başlamadan önce belirleyin; örneğin yalnızca görünme oranını değil, doğrudan desteklenen iddiaların oranını da izleyin.
Bir varyantı başarılı saymadan önce aynı ölçütlerle tekrarlı gözlem yapın. Değişimin hangi faktörden kaynaklanmış olabileceğini yazılı olarak açıklayın ve belirsizlikleri rapora ekleyin. Negatif sonuç da değerlidir: Kaynak düzeni değiştiği halde görünürlük artmadıysa sayfa konusu, kaynak otoritesi, entity tutarlılığı, teknik erişilebilirlik veya sorgu niyeti yeniden incelenebilir.
Sonraki deneyde mümkünse tek bir ana değişkeni değiştirin. İçerik yapısı, kaynak kalitesi, entity düzeni ve yapılandırılmış veriyi aynı anda değiştirmek nedensel yorumu zayıflatır. Deney günlüğünde sürüm, değişiklik tarihi, sorgu kümesi, gözlem sayısı ve karar gerekçesini saklayarak sonuçları daha sonra yeniden doğrulayın.