Qué puedes hacer con Validador de robots.txt
Revisa directivas, grupos y sitemaps. Usa los controles de la herramienta para ajustar la operación y revisa el resultado antes de copiarlo o descargarlo.
Cómo funciona y qué debes tener en cuenta
La comprobación es sintáctica y no simula el comportamiento particular de cada robot ni consulta el archivo publicado.