robots.txt izin veriyor ama sunucunuz engelliyor
robots.txt bir beyandır, sunucunuzun yanıtı ise gerçektir. İkisi çeliştiğinde markanız yapay zekâ cevaplarından sessizce düşer — ve hiçbir hata mesajı almazsınız.
6 dk okuma
Siteniz AI tarayıcılarına gerçekten açık mı?
13 yapay zekâ tarayıcısı için iki ayrı kontrol yapar: robots.txt ne diyor ve sunucunuz gerçekte ne yapıyor. İkisi çeliştiğinde — robots izin verirken güvenlik duvarı engellediğinde — nedeniyle birlikte gösterir.
Ortalama 5–20 saniye sürer. Kayıt istemez, sonuç anında ekranda.
Hazırlanıyor…
Tarayıcı tarayıcı sonuçlar
her satır açılır — ham kanıt içindeKonuyla ilgili yazılar
konunun tamamı13 AI botunun tam listesi ve ne işe yaradıkları
GPTBot, ClaudeBot, PerplexityBot ve diğerleri — hangisi ne yapıyor, engellenirse ne kaybedersiniz ve hangi ikisi aslında tarayıcı bile değil.
5 dk okuma
Aynı konudaki diğer araçlar
hepsirobots.txt ve llms.txt Üretici
AI botları için doğru robots.txt kurallarını ve llms.txt dosyasını üretir. Her bot için izin ya da yasak seçersiniz, çıktı kopyalanmaya hazır gelir.
Hazır · anındaSite Haritası ve İndeksleme DenetimiXML site haritası geçerliliği, ölü bağlantılar, yönlendirme zincirleri, noindex çakışmaları ve robots.txt çelişkileri.
Hazır · ~30 saniyeBu, tam denetimin yedi boyutundan yalnızca biri
Bot erişimi teknik kapıdır — açık olması görünür olduğunuz anlamına gelmez. Tam denetim ayrıca şunları ölçer: kategori sorularında kaç kez göründüğünüz, rakiplerinize göre ses payınız, AI'ın markanız hakkında söylediği yanlış bilgiler, cevaplarda kaynak gösterilen alan adları ve sayfalarınızın alıntılanabilirliği.