XML Sitemap URL
User-Agent Directives (2)
User-agent:
Disallowed Paths:
User-agent:
Disallowed Paths:
robots.txt Output
# robots.txt generated by MiniToolDesk - 100% Client-Side # Documentation: https://developers.google.com/search/docs/crawling-indexing/robots/intro User-agent: * Disallow: /admin/ Disallow: /api/private/ Disallow: /tmp/ Allow: / User-agent: GPTBot Disallow: / Sitemap: https://minitooldesk.com/sitemap.xml
Fixe esta ferramenta no painel lateral do seu navegador
Acesse este utilitário a qualquer momento com Alt+M sem trocar de aba. 100% offline e gratuito.
Como gerar o arquivo robots.txt
- 1Insira a URL do seu sitemap XML.
- 2Defina caminhos permitidos e bloqueados para bots.
- 3Baixe e envie para a raiz do seu domínio.
Indexação em Mecanismos de Busca
Orienta robôs de busca para conteúdos relevantes.
Perguntas Frequentes (FAQ)
Gostando do Gerador de Arquivos Robots.txt?Ajude outros desenvolvedores a descobrirem ferramentas privadas e sem anúncios!
MiniToolDesk é 100% gratuito e local. Seu apoio mantém o projeto sem anúncios.
Ferramentas Relacionadas
Popular
Comparador de Texto e Código (Diff)
Compare códigos e textos lado a lado ou em linha com destaque visual instantâneo
Launch tool→
Conversor de Formato de Texto (Case Converter)
Converta textos entre camelCase, snake_case, kebab-case, PascalCase e CONSTANT_CASE
Launch tool→
Contador de Palavras, Caracteres e Tempo de Leitura
Analise palavras, caracteres, linhas, parágrafos e tempo estimado de leitura em tempo real
Launch tool→
Remover Linhas Duplicadas e Ordenar
Elimine linhas repetidas de listas, ordene alfabeticamente e limpe linhas em branco
Launch tool→