Yapay zekâ yanıt motorlarında kaynak gösterilmek: belgelenenler ve belgelenmeyenler

Google'ın AI Overviews (Yapay Zekâ Genel Bakışları) ve AI Mode'a ilişkin Search Central dokümantasyonu açık. İki özellikte de görünmek için ek bir şart yok ve özel bir optimizasyon gerekmiyor. Bir sayfanın destekleyici bağlantı olarak uygun sayılması için dizine eklenmiş ve Google Arama'da snippet ile gösterilmeye uygun olması gerekiyor. Google'ın optimizasyon kılavuzu, sitenin uygun sayılması için Search Console'da Arama'nın üretken yapay zekâ özelliklerine dahil edilmiş olması gerektiğini de ekliyor.

Google mekanizmayı da genel hatlarıyla anlatıyor. Bu özellikler, Arama dizininden sayfa almak için temel Arama sıralama sistemlerine dayanan geri getirmeyle zenginleştirilmiş üretim (RAG) ve modelin bir yanıt oluşturmadan önce alt konularda birkaç ilişkili arama yaptığı "query fan-out" (sorgu dağıtımı) yöntemini kullanıyor. AI Overviews yalnızca Google'ın sistemleri bunların klasik sonuçlara bir katkı sağladığına karar verdiğinde görünüyor; Google bunların çoğu zaman tetiklenmediğini söylüyor. AI Mode ve AI Overviews farklı modeller kullanabildiği için aynı soruya gösterdikleri bağlantılar farklı olabiliyor.

Uygulamada Google'ın yapay zekâ özelliklerindeki görünürlük, olağan arama görünürlüğüyle aynı temellere dayanıyor. Taranamayan, dizine eklenemeyen ya da snippet göstermesi engellenmiş bir sayfa uygun sayılmaz.

OpenAI farklı amaçlar için ayrı tarayıcılar belgeliyor. OAI-SearchBot, web sitelerini ChatGPT'nin arama özelliklerinde gösteriyor; onu engelleyen siteler ChatGPT arama yanıtlarında gösterilmiyor, ancak gezinme bağlantısı olarak yine de görünebiliyor. GPTBot, OpenAI'ın temel modellerini eğitmekte kullanılabilecek içeriği tarıyor. İki ayar birbirinden bağımsız; dolayısıyla bir site OAI-SearchBot'a izin verip GPTBot'u engelleyebilir. ChatGPT-User, bir kullanıcı ChatGPT'ye soru sorduğunda sayfaları getiriyor ve OpenAI, robots.txt kurallarının kullanıcı tarafından başlatılan bu isteklere uygulanmayabileceğini belirtiyor. OpenAI'a göre bir robots.txt değişikliğinin arama sonuçlarına yansıması yaklaşık 24 saat sürebiliyor.

Perplexity'nin dokümantasyonu benzer bir yapı izliyor. PerplexityBot, web sitelerini Perplexity arama sonuçlarında gösteriyor ve bağlantı veriyor; Perplexity'ye göre yapay zekâ temel modelleri için içerik taramakta kullanılmıyor. Perplexity-User, kullanıcı sorularına yanıt olarak sayfaları getiriyor ve genellikle robots.txt'yi dikkate almıyor. Perplexity, bir web uygulaması güvenlik duvarının arkasındaki site sahiplerine yayımladığı IP aralıklarını izin listesine eklemelerini de öneriyor.

Bir hata türü içerik ekibinin görüş alanının altında kalıyor. İçerik kazıyıcıları durdurmak için yazılmış bir güvenlik duvarı ya da CDN kuralı, kimse bu yönde karar vermeden OAI-SearchBot'u veya PerplexityBot'u engelleyebilir. Google'ın yapay zekâ özelliklerine ilişkin kendi kontrol listesi, taramaya robots.txt'nin yanı sıra "her türlü CDN veya barındırma altyapısı" tarafından da izin verildiğinden emin olmayı içeriyor.

Hiçbir sağlayıcı, sisteminin belirli bir yanıt için bir kaynağı diğerine tercih ederken kullandığı kriterleri yayımlamıyor. Bu ağırlıkları bildiğini öne süren tavsiyeler çıkarımdan ibaret. Google'ın optimizasyon kılavuzu, hiçbir üçüncü taraf aracın Google'ın dahili sıralama veya yapay zekâ sistemlerine erişimi olmadığını belirtiyor ve site sahiplerini dahili Google metriklerini kullandığını iddia eden araçlara karşı dikkatli olmaya çağırıyor.

Kılavuz llms.txt'ye de değiniyor. llms.txt, llmstxt.org'da yayımlanmış bir öneri: dil modellerine bir sitenin seçilmiş bir özetini, sayfalarının sade sürümlerine bağlantılarla birlikte sunan bir markdown dosyası. Google, Google Arama'nın llms.txt'yi ya da benzer yapay zekâ metin dosyalarını kullanmadığını söylüyor. Bu dosyayı yayımlamak Google Arama'daki görünürlüğe veya sıralamaya ne yardım eder ne zarar verir. OpenAI'ın ve Perplexity'nin tarayıcı dokümantasyonunda bu dosyadan söz edilmiyor. Bir site, onu okuyan kodlama ajanları veya diğer araçlar için yine de böyle bir dosya yayımlayabilir; ancak burada ele alınan üç yanıt motorunun herhangi birinde bunu bir sıralama faktörü olarak görmek için yayımlanmış bir dayanak yok.

Google, site sahiplerinin yapay zekâ özellikleri için göz ardı edebileceğini söylediği diğer popüler taktikleri de sıralıyor. Bunlar arasında içeriği küçük "parçalara" (chunk) bölmek, sayfaları özellikle yapay zekâ sistemleri için yeniden yazmak, web genelinde yapay bahsedilmelerin peşinde koşmak ve yapay zekâ için özel schema.org işaretlemesi eklemek var.

Bir kuruluşu kaynak gösteren bir yanıt motoru, bunun hangi kuruluş olduğunu çözmek zorunda. Ticari ad ticari unvandan farklı olduğunda, sicil numarası sitede hiçbir yerde geçmediğinde ve rehberlerdeki, sosyal platformlardaki ve pazaryerlerindeki profiller işletmeyi farklı ifadelerle anlattığında bu iş zorlaşıyor.

Google'ın Organization yapılandırılmış veri dokümantasyonu, Google'ın bir kuruluşun idari bilgilerini anlamasına ve onu diğerlerinden ayırt etmesine yardımcı olan işaretlemeyi tarif ediyor. Kullanılabilecek özellikler arasında legalName, diğer sitelerdeki profillere işaret eden sameAs bağlantıları, vatID, taxID ve 0199 önekiyle bir Legal Entity Identifier (LEI) taşıyabilen iso6523Code var. Bu özelliklerin hiçbiri zorunlu değil. Google'ın yapay zekâ özelliklerine ilişkin kılavuzu iki çekince ekliyor. Yapılandırılmış veri sayfadaki görünür metinle örtüşmeli ve üretken yapay zekâ araması için yapılandırılmış veri gerekli değil. Değeri belirsizliği ortadan kaldırmasında yatıyor; zengin sonuçlara uygunluğa da yardımcı oluyor.

Bu iş gösterişsiz. Ticari unvanı, sicil numarasını ve kayıtlı adresi web sitesinde düz metin olarak yayımlayın. Bunları tutarlı biçimde işaretleyin ve sameAs'i kontrol ettiğiniz profillere yönlendirin. Google İşletme Profili'ni ve perakendeciler için Merchant Center bilgilerini güncel tutun. Google, ikisinin de ürün ve hizmetlerin yapay zekâ yanıtlarında görünmesine yardımcı olabileceğini söylüyor.

Tarayıcı politikasına bilinçli olarak karar verin. OpenAI için eğitim erişimi ve arama erişimi GPTBot ve OAI-SearchBot üzerinden ayrı ayrı ayarlanabilir. Google'da Google-Extended belirteci, Gemini model eğitiminde ve yanıtların kaynaklara dayandırılmasında (grounding) kullanımı yönetiyor; Google bunun Google Arama'ya dahil edilmeyi veya sıralamayı etkilemediğini belirtiyor. Her kullanıcı aracısı için kararı ve gerekçesini kayda geçirin.

Politikanın uç katmanda da işlediğini test edin. Yayımlanmış kullanıcı aracılarından ve IP aralıklarından gelen engellenmiş istekler için güvenlik duvarı ve CDN kayıtlarını inceleyin, robots.txt'yi her sağlayıcının belgelenmiş belirteçleriyle kontrol edin.

Snippet kontrollerini yalnızca bir amaca hizmet ettikleri yerde kullanın. Google; nosnippet, data-nosnippet, max-snippet ve noindex'i, yapay zekâ özellikleri dahil Arama'da bir sayfadan neyin görüneceğini sınırlayan kontroller olarak kabul ediyor. Snippet'leri engelleyen bir sayfa, destekleyici bağlantı olarak uygun sayılma şansını da kendi eliyle ortadan kaldırır.

Ölçülebileni ölçün. Google, AI Overviews ve AI Mode trafiğini Search Console Performans raporu içinde raporluyor ve bir Üretken Yapay Zekâ performans raporu sunuyor. Diğer motorlardaki kaynak gösterimlerini, sabit bir soru setini sabit bir takvimle örnekleyerek izleyin ve sonuçları bir sıralama olarak değil, gözlem olarak değerlendirin.

Motorlara kaynak gösterilmeye değer bir şey verin. Google'ın kılavuzu, birinci elden uzmanlığa dayanan "sıradan olmayan" içerik istiyor. Köklü bir kuruluş için bu genellikle elinde zaten bulunan somut kanıtları, yöntemleri ve verileri, her sayfada yazar ve tarih bilgisiyle yayımlamak demektir.