Robots Txt Generator
Robots Txt Generator — se ejecuta en el navegador. No se guardan datos.
Generar robots.txt
Crea el texto de robots.txt para el directorio raíz. Debe subirlo al servidor usted.
Cómo usar
- Introduzca un User-agent. El asterisco inicial significa todos los rastreadores.
- Escriba Rutas Allow y Rutas Disallow, una ruta por línea.
- Opcionalmente añada una URL de Sitemap y active Bloque extra: User-agent: AdsBot-Google → Disallow: / si lo necesita.
- Pulse Generar, revise el texto robots.txt abajo y luego Copiar.
- Suba el archivo a la raíz del sitio usted mismo: esta herramienta no lo publica. Restablecer vacía los campos.
Conceptos clave
El generador de robots.txt arma un archivo de texto que sugiere rutas a los rastreadores. No es una barrera de seguridad; proteja datos privados con autenticación. Si hay líneas Disallow y Allow está vacío, suele leerse que se permite rastrear todo excepto las rutas bloqueadas. El archivo generado solo tiene efecto cuando se publica en la raíz.
El bloque extra de AdsBot es un ejemplo para que un bot de anuncios no vea todo el sitio. No bloquee todo si necesita visibilidad en búsqueda. La línea Sitemap ayuda a los rastreadores a encontrar su lista de URL. La herramienta solo construye texto; no sube a un servidor.
Ejemplo
User-agent asterisco, Disallow /admin/ y /private/, más una URL de sitemap, genera un archivo con esas tres reglas. Activar la opción AdsBot añade un segundo bloque. Guarde el texto copiado como archivo público en la raíz de su hosting. Con solo Disallow y Allow vacío, los rastreos se leen como permitidos salvo las rutas bloqueadas. Bloquear una ruta de admin sin inicio de sesión sigue permitiendo el acceso directo por URL: no lo confunda con seguridad. Tras poner el archivo en la raíz, compruebe la obtención en Search Console. Si reintenta la misma entrada, restablezca primero. En un ordenador compartido, vacíe los campos al terminar. Cerrar la pestaña descarta lo pegado; no hace falta pedir un borrado al servidor. Los nombres de botones coinciden con la herramienta de arriba. Si el resultado está vacío, revise campos obligatorios y errores ocultos. Esta página es ayuda de uso, no una afirmación de que la entrada se almacene en otro sitio.
Relacionado: Generador de sitemap · Generador de metaetiquetas · Generador hreflang
Preguntas frecuentes
¿El generador de robots.txt sube el archivo a mi servidor?
No. Solo construye texto. Debe publicarlo en la raíz usted mismo.
¿robots.txt es una función de seguridad?
No. Solo es una pista para rastreadores. Proteja las páginas de administración con inicio de sesión.
¿Qué es el bloque extra de AdsBot?
Un bloque opcional que pone Disallow / para AdsBot-Google. Es un ejemplo para reducir el rastreo de bots de anuncios.
¿Puedo usar Allow y Disallow a la vez?
Sí. Escriba una ruta por línea. Las rutas más específicas suelen tener prioridad.
¿Es obligatoria una URL de Sitemap?
Opcional. Facilita encontrar la lista. Un sitemap XML es un archivo aparte.
¿El archivo generado se envía de inmediato a los buscadores?
No. Suba el archivo y luego compruébelo en Search Console.
Última revisión: 2026-09-04