Gerador Robots.txt
Crie um arquivo robots.txt que controle o que os mecanismos de pesquisa e rastreadores de IA podem visitar.
- Gratuito
- Sem cadastro
- Executado no navegador
- Funciona no celular
Gerador Robots.txt em resumo
- Entrada
- Regras, caminhos e mapas de sites
- Saída
- robots.txt
- Privacidade
- Tudo acontece no seu dispositivo. Nada é enviado para servidores.
- Preço
- Gratuito, sem conta, sem marca d’água.
Como usar Gerador Robots.txt
- 1Escolha se os rastreadores podem visitar o site.
- 2Liste caminhos para bloqueio, exceções e mapas de sites.
- 3Baixe o robots.txt e coloque-o na raiz do seu site.
Recursos
- Proibir e permitir regras.
- Linhas do mapa do site.
- Um clique para bloquear rastreadores de treinamento de IA conhecidos.
- Caminhos validados.
Perguntas frequentes sobre Gerador Robots.txt
Para onde vai o arquivo?
Na raiz do seu domínio: https://example.com/robots.txt.
O robots.txt oculta páginas?
Não. Ele pede que rastreadores bem comportados não visitem; as páginas bloqueadas ainda podem ser indexadas se vinculadas a outro lugar. Use noindex para manter uma página fora da pesquisa.
Alguma coisa foi enviada?
Não. Ele roda inteiramente no seu navegador, então nada que você digita é enviado para o nosso servidor ou armazenado em qualquer lugar.
Ferramentas relacionadas
Gerador de SitemapTransforme uma lista de URLs de páginas em um sitemap XML válido para Google e Bing.Verificador de metadados de sitesVerifique o SEO de uma página e compartilhe metadados: título, descrição, canônico, cabeçalhos, dados estruturados e muito mais.Visualização do Open GraphVeja como ficará um link quando compartilhado no Facebook, LinkedIn, X, Slack e WhatsApp e quais tags estão faltando.Gerador de código de barrasFaça EAN, UPC, Code 128 e outros códigos de barras como PNG ou SVG.
Mais ferramentas de url & web toolsÚltima atualização