Generador de Robots.txt
Herramienta SEONuevoGenera un archivo robots.txt para tu sitio web.
Esta herramienta se ejecuta por completo en tu navegador. Tus archivos nunca salen de tu dispositivo — no se sube nada.
Reglas para rastreadores
Usa * para aplicar las reglas a todos los rastreadores.
Una ruta por línea. Déjalo en blanco si no hay nada que permitir.
Una ruta por línea. Estas rutas quedan bloqueadas para el rastreo.
User-agent: * Disallow: /admin
Preguntas frecuentes
¿Qué hace un archivo robots.txt?
Un archivo robots.txt indica a los rastreadores de los buscadores qué partes de tu sitio pueden o no pueden solicitar. Defines un User-agent y luego permites (Allow) o bloqueas (Disallow) rutas concretas, y puedes señalar tu sitemap. Guía a los bots que se comportan bien, pero no es un control de seguridad — lo que de verdad necesites ocultar debe protegerse de otra forma.
¿Mis datos se suben a algún sitio al usar este generador?
No. Todo el archivo robots.txt se construye directamente en tu navegador con JavaScript del lado del cliente. Tus rutas, la URL del sitemap y la configuración nunca salen de tu dispositivo y no se envía nada a un servidor, así que todo queda completamente privado.
¿Qué es Crawl-delay y debería configurarlo?
Crawl-delay pide a los rastreadores que esperen ese número de segundos entre peticiones, lo que puede aliviar la carga en servidores pequeños. Es opcional y no todos los rastreadores lo respetan (Google lo ignora, por ejemplo). Déjalo vacío salvo que tengas un motivo concreto para frenar a los bots.