Probador de robots.txt — gratis y en línea
Cambiaste tu robots.txt y ahora no estás seguro: ¿podrá Google rastrear esa página o la bloqueaste sin querer? Leer esas reglas a ojo es fácil de equivocar, y una sola línea de más puede esconder de las búsquedas una sección entera de tu sitio. Añadimos una herramienta gratis que lo comprueba por ti — Robots.txt Tester — en tu propio navegador.
Qué hace
Pega el contenido de tu robots.txt, escribe una ruta de URL y elige un user-agent (como Googlebot), y te dice al instante si esa ruta está Permitida o Bloqueada. También te muestra la regla exacta que tomó la decisión, así sabes qué línea está actuando y puedes corregirla si está mal.
Nada sale de tu dispositivo
Toda la comprobación ocurre dentro de tu navegador. Tu robots.txt y las rutas que pruebas nunca se suben ni se guardan en ningún sitio. Al cerrar la pestaña no queda nada.
Cómo usarlo
- Abre Robots.txt Tester y pega el contenido de tu robots.txt en el cuadro.
- Escribe la ruta de URL que quieres probar y elige un user-agent.
- Lee el resultado Permitida o Bloqueada y la regla exacta que lo causó.
Es gratis y sin límite. Hay más herramientas pequeñas en la página de Apps.