mtools.lol
pt

Gerador Robots.txt

Crie um arquivo robots.txt que controle o que os mecanismos de pesquisa e rastreadores de IA podem visitar.

  • Gratuito
  • Sem cadastro
  • Executado no navegador
  • Funciona no celular

Gerador Robots.txt em resumo

Entrada
Regras, caminhos e mapas de sites
Saída
robots.txt
Privacidade
Tudo acontece no seu dispositivo. Nada é enviado para servidores.
Preço
Gratuito, sem conta, sem marca d’água.

Como usar Gerador Robots.txt

  1. 1Escolha se os rastreadores podem visitar o site.
  2. 2Liste caminhos para bloqueio, exceções e mapas de sites.
  3. 3Baixe o robots.txt e coloque-o na raiz do seu site.

Recursos

  • Proibir e permitir regras.
  • Linhas do mapa do site.
  • Um clique para bloquear rastreadores de treinamento de IA conhecidos.
  • Caminhos validados.

Perguntas frequentes sobre Gerador Robots.txt

Para onde vai o arquivo?

Na raiz do seu domínio: https://example.com/robots.txt.

O robots.txt oculta páginas?

Não. Ele pede que rastreadores bem comportados não visitem; as páginas bloqueadas ainda podem ser indexadas se vinculadas a outro lugar. Use noindex para manter uma página fora da pesquisa.

Alguma coisa foi enviada?

Não. Ele roda inteiramente no seu navegador, então nada que você digita é enviado para o nosso servidor ou armazenado em qualquer lugar.

Mais ferramentas de url & web toolsÚltima atualização