Analizador de Robots.txt

Herramienta gratis

Pega tu robots.txt y una lista de URLs. Para cada una, indicamos si está permitida o bloqueada, la línea y el patrón exacto que gana, y por qué. El linter detecta además errores reales: bloqueos accidentales de todo el sitio, "noindex" en robots.txt (Google no lo soporta ahí desde 2019), sitemaps con URL inválida y reglas contradictorias. Todo se procesa en tu navegador: nada se sube a los servidores de RA Software Apps, y la URL del sitemap solo se valida por sintaxis, nunca se descarga.

Escribe un user-agent (ej. "Googlebot") o deja "*" para todos los rastreadores.

Resultados de la simulación

Pega tu robots.txt y añade URLs, o carga el ejemplo, y pulsa Simular.

Hallazgos del linter

Pega tu robots.txt, o carga el ejemplo, para ver los hallazgos.

Informe

Informe en Markdown