Generador de robots.txt
Crea un archivo robots.txt con reglas para buscadores y sitemap.
Espacio de trabajo · Generador de robots.txt
Cómo se usa
Pega el código, la URL o los datos que quieres procesar.
Elige el formato o la acción disponibles en la herramienta.
Revisa el resultado y cópialo en tu editor o archivo de configuración.
Ejemplos
Permitir todo
User-agent: * / Allow: / y la URL del sitemap.
Bloquear una carpeta
Disallow: /admin/ evita que se rastree esa sección.
Lo que conviene saber
robots.txt indica a los rastreadores qué partes del sitio pueden visitar. No impide que una página aparezca en resultados si ya está indexada ni protege información privada; para eso usa autenticación o noindex.
Preguntas frecuentes
Herramientas relacionadas
Otras herramientas que pueden servirte para tareas similares.
Generador de sitemap XML
Crea un sitemap XML válido a partir de una lista de URLs.
Generador de metadatos SEO
Crea title, meta description, canonical y Open Graph para una página.
Validador XML
Comprueba si un XML está bien formado y localiza errores.