nalyzed.

robots.txt Test Aracı

robots.txt içeriğinizi yapıştırın, bir yol seçin ve hangi botların o yolu tarayabileceğini anında görün. Eşleştirme RFC 9309'a uyar: en özel user-agent grubu uygulanır, en uzun eşleşen kural kazanır, eşitlikte Allow kazanır.

Arama motorları
Botİzinli
Googlebot✓ İzinli
Bingbot✓ İzinli
DuckDuckBot✓ İzinli
YandexBot✓ İzinli
Applebot✓ İzinli
Yapay zekâ botları
Botİzinli
GPTBot✕ Engelli
OAI-SearchBot✓ İzinli
ChatGPT-User✓ İzinli
ClaudeBot✓ İzinli
Claude-SearchBot✓ İzinli
Claude-User✓ İzinli
PerplexityBot✓ İzinli
Google-Extended✓ İzinli
Applebot-Extended✓ İzinli
CCBot✓ İzinli
Bytespider✓ İzinli
meta-externalagent✓ İzinli
Amazonbot✓ İzinli
DuckAssistBot✓ İzinli
MistralAI-User✓ İzinli
YouBot✓ İzinli
cohere-ai✓ İzinli
Diffbot✓ İzinli
AI2Bot✓ İzinli
ImagesiftBot✓ İzinli
PetalBot✓ İzinli
Timpibot✓ İzinli

Neleri kontrol eder

  • * grubuna göre öncelikli özel user-agent grupları
  • * joker karakteri ve $ çapasıyla en uzun eşleşme önceliği
  • Tüm büyük arama ve yapay zekâ botları aynı anda
  • Tarayıcınızda çalışır; hiçbir şey yüklenmez

Sık sorulan sorular

robots.txt engellediği halde sayfam neden dizinde?
robots.txt taramayı kontrol eder, dizine eklemeyi değil. Engellenen bir URL bağlantılar üzerinden yine de dizine eklenebilir. noindex meta etiketi veya başlığı kullanın ve etiketin görülebilmesi için sayfayı taranabilir bırakın.
Kurallar büyük/küçük harfe duyarlı mı?
Yollar duyarlıdır; user-agent adları değildir.
Canlı robots.txt dosyamı test edebilir miyim?
Tam rapor çalıştırın: canlı robots.txt dosyanızı indirir ve her bot için erişimi gösterir.

Diğer ücretsiz araçlar

English