Outils gratuits
Vérificateur robots.txt
Récupérez le robots.txt, listez les groupes user-agent, les règles et les sitemaps déclarés.
Limites
Analyse les directives standard (RFC 9309). Les extensions propres à un moteur sont affichées sans être interprétées.