Generador de robots.txt

Define quién puede rastrear tu sitio y qué puede alcanzar — elige un preset o agrega reglas por bot, un Crawl-delay y tu Sitemap. Copia o descarga un robots.txt válido. No se sube nada.

Inicio rápido

Reglas de rastreo

URL del Sitemap (opcional)

Host (opcional)

Tu robots.txt Coloca este archivo en la raíz de tu sitio, accesible en /robots.txt.

Funciona completamente en tu navegador. Sin subidas, sin registro — tus reglas permanecen en tu dispositivo.

Cómo funciona

STEP 1

Elige un punto de partida

Selecciona Permitir todo, Bloquear todo o Personalizar — luego ajusta las reglas a continuación.

STEP 2

Define reglas por bot

Nombra un User-agent (o * para todos) y lista las rutas para Allow o Disallow. Agrega un Crawl-delay o tu Sitemap si lo deseas.

STEP 3

Copia o descarga

Obtén un robots.txt válido y colócalo en la raíz de tu sitio, accesible en /robots.txt. No se sube nada.