Yapay Zekâ Botları Siteme Geliyor Mu, Bu Neden Önemli?

Hangi Botlar Var?

OpenAI’ın GPTBot ve OAI-SearchBot’u, Anthropic’in ClaudeBot’u ve Perplexity’nin PerplexityBot’u, bu şirketlerin kendi belgelerinde adıyla tanıttığı tarayıcılar. Bir kısmı modelleri eğitmek için içerik toplar, bir kısmı da kullanıcı soru sorduğu anda güncel sayfaları okur.

Google ise yapay zekâ için ayrı bir tarayıcı göndermez. Sitenizi kendi arama tarayıcısıyla okur ve yapay zekâ kullanımı için ayrı bir izin adı tanımlar. Bu yüzden kayıtlarda “Google’ın yapay zekâ botu” diye ayrı bir ziyaretçi görmezsiniz.

Neden Önemli?

Asistanlar güncel bilgi için sayfaları okumak zorunda. Siteniz bu tarayıcılara kapalıysa, asistan hakkınızdaki güncel bilgiyi sitenizden alamaz. Elinde ya eski bilgiler kalır ya da başkalarının sizin hakkınızda yazdıkları.

Bu özellikle sık değişen bilgiler için önemli: fiyat aralığı, çalışma saatleri, yeni ürünler, gönderim koşulları. Asistanın bunları yanlış söylemesi, hiç söylememesinden kötü olabilir.

Bir başka etkisi de kaynak gösterimi. Güncel aramada sayfanızı okuyabilen bir asistan, cevabında size bağlantı verebilir. Okuyamadığı bir sayfaya bağlantı vermez; cevap başka bir siteye yönlendirir.

Kapı Farkında Olmadan Kapanabilir

Bazı altyapı ve güvenlik hizmetleri yapay zekâ tarayıcılarını varsayılan olarak engelleyebiliyor. Örneğin Cloudflare, 2025 ortasında yeni eklenen sitelerde bu tarayıcıları varsayılan olarak engellemeye başladığını duyurdu. Böyle bir ayar, site sahibinin haberi olmadan devreye girebilir.

Sonuç şu: siteniz ziyaretçilere açık görünür, her şey normal çalışır, ama asistanlar için kapalıdır. Bunu fark etmenin tek yolu bakmak.

Geldiklerini Nasıl Anlarsınız?

Sunucunuz her ziyareti, ziyaretçinin kendini tanıttığı adla kaydeder. Bu kayıtlarda botların adlarına bakmak, ne sıklıkla geldiklerini ve hangi sayfaları okuduklarını gösterir. Kayıtlara genellikle barındırma hizmetinizin panelinden ya da teknik ekibinizden ulaşılır.

Kayıtlara bakarken iki durumu ayırmak gerekir: hiç gelmeyen bir bot ile gelip kapıda geri çevrilen bir bot. İkisi de cevaplarda görünmemenize yol açar ama nedenleri farklı.

Eğitim Botu İle Arama Botu

Yapay zekâ tarayıcıları iki işe yarar. Bir kısmı modellerin eğitimi için içerik toplar; bu içerik modelin genel bilgisinin parçası olur ve etkisi zamanla görülür. Bir kısmı da bir kullanıcı soru sorduğunda ilgili sayfaları o an okur.

İkisinin sonuçları farklı zamanlarda hissedilir. Arama botuna kapalı bir site güncel cevaplarda hemen kaybolur; eğitim botuna kapalı bir sitenin etkisi ise sonraki model sürümlerinde ortaya çıkar.

Kayıtlarda Neye Dikkat Etmeli?

Bir botun adını taşıyan her ziyaret gerçekten o bota ait olmayabilir; bazı otomatik yazılımlar kendini bilinen bir botun adıyla tanıtır. Şirketler, kendi tarayıcılarının nereden geldiğini doğrulamaya yarayan bilgileri belgelerinde yayımlıyor.

Bu yüzden kayıtları okurken sayılara olduğu kadar düzene de bakmak gerekir: ziyaretlerin ne zaman yoğunlaştığı, hangi sayfaların tekrar tekrar okunduğu ve hangilerine hiç uğranmadığı.

Hepsine Açık Olmak Zorunda Mısınız?

Hangi tarayıcıya izin verileceği bir işletme kararı. Bazı işletmeler içeriklerinin model eğitiminde kullanılmasını istemez, ama güncel cevaplarda görünmek ister. Bu ikisini ayırmak mümkün.

Önemli olan, kararın bilerek verilmesi. Varsayılan bir ayarın sizin yerinize karar vermesi, istemeden görünmez olmanıza yol açabilir.

Kararı vermeden önce hangi botların geldiğini ve hangi sayfaları okuduğunu görmek, neyin feda edildiğini anlamaya yardım eder.

Hangi Sayfaları Okuyorlar?

Botların en çok okuduğu sayfalar, asistanların sizi anlatırken dayanabileceği sayfalar. Çoğu zaman ana sayfa ve birkaç ürün ya da hizmet sayfası öne çıkar; önemli bilgilerin bulunduğu sayfalara hiç uğranmıyor olabilir.

Bu dağılımı her ay izlemek, sitenizin hangi kısmının asistanlar için görünür olduğunu gösterir. Örnek raporumuzda bu bölümün nasıl göründüğüne bakabilirsiniz.

Ziyaret sayısı tek başına iyi ya da kötü değil. Az ama doğru sayfaları okuyan bir bot, çok ama ilgisiz sayfaları okuyan bir bottan daha faydalı olabilir. Asıl soru, işinizi anlatan sayfaların okunup okunmadığı.