Pular para o conteúdo

Gerador de Robots.txt

Escolha como os robôs de busca devem tratar seu site e copie ou baixe o arquivo robots.txt.

robots.txt
User-agent: *
Allow: /

O que o robots.txt controla

O robots.txt é um arquivo de texto simples que informa a robôs de busca bem-comportados quais partes do seu site eles podem acessar, ajudando a economizar orçamento de rastreamento em páginas que não precisam ser indexadas, como painéis administrativos ou resultados de busca interna.

Perguntas frequentes

Onde devo colocar o arquivo robots.txt?

Ele precisa ficar na raiz do seu domínio, para ficar acessível em https://seudominio.com/robots.txt.

O robots.txt garante que uma página não vai aparecer na busca?

Não. Ele apenas pede a robôs bem-comportados que não acessem certos caminhos; uma página bloqueada ainda pode ser indexada se houver links para ela. Para isso, use uma meta tag noindex.

Ferramentas Relacionadas

Você também pode precisar destas para a mesma tarefa.