XML Sitemap URL
User-Agent Directives (2)
User-agent:
Disallowed Paths:
User-agent:
Disallowed Paths:
robots.txt Output
# robots.txt generated by MiniToolDesk - 100% Client-Side # Documentation: https://developers.google.com/search/docs/crawling-indexing/robots/intro User-agent: * Disallow: /admin/ Disallow: /api/private/ Disallow: /tmp/ Allow: / User-agent: GPTBot Disallow: / Sitemap: https://minitooldesk.com/sitemap.xml
Fija esta herramienta en el panel lateral de tu navegador
Accede a esta utilidad en cualquier momento con Alt+M sin cambiar de pestaña. 100% offline y gratis.
Cómo generar un archivo robots.txt
- 1Introduzca la URL de su sitemap XML.
- 2Defina rutas permitidas y bloqueadas por User-Agent.
- 3Descargue y suba el archivo a la raíz de su dominio.
Indexación en Buscadores
Guía a los rastreadores y protege directorios privados.
Preguntas Frecuentes (FAQ)
¿Te resulta útil Generador de Archivos Robots.txt?¡Ayuda a otros desarrolladores a descubrir herramientas privadas y sin publicidad!
MiniToolDesk es 100% gratuito y en el navegador. Tu apoyo mantiene la web libre de anuncios.
Herramientas Relacionadas
Popular
Comparador de Texto y Código (Diff)
Compara textos y código en paralelo o en línea con resaltado visual instantáneo
Launch tool→
Conversor de Mayúsculas y Minúsculas
Convierte texto entre camelCase, snake_case, kebab-case, PascalCase y CONSTANT_CASE
Launch tool→
Contador de Palabras y Caracteres
Analiza palabras, caracteres, líneas, párrafos y tiempo estimado de lectura en vivo
Launch tool→
Eliminar Líneas Duplicadas
Limpia registros repetidos, ordena alfabéticamente y elimina líneas en blanco
Launch tool→