Vérificateur de robots.txt
Récupérez et analysez le fichier robots.txt de n'importe quel site web. Consultez les règles par agent utilisateur, trouvez les URL de sitemap et testez si une URL est bloquée. Gratuit, sans compte requis.
Enter a domain without protocol (e.g., example.com). Fetched via CORS proxy.
About Robots.txt Checker
Analysez le fichier robots.txt de n'importe quel site web pour comprendre comment les moteurs de recherche sont invités à explorer le site. Extrayez les règles par agent utilisateur, trouvez les références de sitemap et testez les chemins d'URL par rapport aux règles de blocage. Tout dans votre navigateur.
Analyser robots.txt
Extrayez toutes les règles de n'importe quel robots.txt : directives User-agent, règles Allow/Disallow, Crawl-delay et URL de sitemap. Tableaux structurés par agent.
Tester une URL par rapport aux règles
Vérifiez si un chemin d'URL spécifique serait bloqué par les règles robots.txt. Voyez quelle règle correspond et si le chemin est autorisé ou interdit.
Découverte de sitemap
Extrayez automatiquement toutes les directives Sitemap du fichier robots.txt. Ne manquez jamais une URL de sitemap lors d'un audit SEO.
Vue brute et résumé
Consultez le robots.txt brut complet avec des statistiques structurées : nombre total de règles, agents utilisateurs trouvés et références de sitemap. Copiez le contenu brut pour une analyse plus approfondie.