Ücretsiz · Kayıt gerekmez

robots.txt test ve doğrulama

Sitenizin robots.txt dosyasını okuyup kural gruplarını, sitemap satırlarını ve riskli kuralları gösterelim. Bir adres yazın; hangi botun girebildiğini anında görün.

Alan adınızın kök dizinindeki robots.txt dosyası okunur; ardından adres test edip dosyayı düzenleyebilirsiniz.

robots.txt nasıl çalışır?

robots.txt, sitenizin kök dizininde duran ve botlara hangi yolları tarayabileceklerini söyleyen dosyadır. Google, bir adrese uyan en uzun (en belirgin) kuralı uygular; eşitlikte Allow kazanır.

robots.txt sayfaları dizinden çıkarmaz, yalnızca taramayı engeller. Bir sayfanın Google’da görünmemesini istiyorsanız meta robots noindex kullanın.

  • User-agent: kuralların hangi bota uygulandığı
  • Disallow ve Allow: engellenen ve izin verilen yollar (* ve $ desteklenir)
  • Sitemap: XML sitemap adresiniz
  • Kural testi: bir adresin Googlebot, Bingbot, GPTBot ve diğer botlar için durumu

Sık sorulan sorular

Disallow: / ne anlama gelir?
Sitenin tamamının ilgili bot tarafından taranmasını engeller. User-agent: * grubundaysa tüm botlar engellenir ve site zamanla arama sonuçlarından düşebilir.
CSS ve JS dosyalarını engellemeli miyim?
Hayır. Google sayfaları bir tarayıcı gibi çizer; CSS ve JS engellenirse sayfayı doğru anlayamaz ve mobil uyumluluk sorunları görebilir.
Değişiklikler ne zaman geçerli olur?
Google robots.txt dosyasını genellikle 24 saate kadar önbellekte tutar. Search Console’daki robots.txt raporundan dosyayı yeniden taratabilirsiniz.

Siteniz 20 saniyede ne durumda, görün.

Ücretsiz analizle teknik sorunlarınızı ve AI görünürlük açıklarınızı öğrenin; ardından düzeltmeyi AutoAiSeo’ya bırakın.

  • Kart gerekmez
  • Kurulum 5 dakika
  • İstediğiniz an iptal
Ücretsiz analiz et