Gerador de robots.txt

Digite o endereço do seu site: a nossa IA lê o seu arquivo atual e escreve um arquivo limpo que diz aos robôs o que eles podem visitar.

Grátis, sem cadastro. Só a página pública é lida.

O que é o arquivo robots.txt?

O robots.txt é um pequeno arquivo de texto na raiz do seu site (meusite.com.br/robots.txt). Os robôs o leem antes de visitar as suas páginas: ele diz quais partes do site eles podem percorrer e onde encontrar o seu sitemap.

Este gerador escreve o arquivo para você. Digite o endereço do seu site: a nossa IA lê o arquivo que você tem hoje, explica em palavras simples e propõe um arquivo limpo. Ele mantém o que o seu arquivo já bloqueia, robôs de IA incluídos, tira um bloqueio do site inteiro se houver um e acrescenta o seu sitemap.

Como usar

  1. Digite o endereço do seu site.
  2. Leia o que encontramos: o que o seu arquivo atual diz, em palavras simples. “O que muda” lista as diferenças com o novo.
  3. Copie ou baixe o arquivo e coloque na raiz do seu site, com o nome exato robots.txt.

Perguntas frequentes

Suas dúvidas

Fale conosco
Bloquear uma página no robots.txt tira a página do Google?

Não. O robots.txt impede a visita, não a listagem: uma página bloqueada pode continuar nos resultados se outros sites tiverem links para ela. Para tirar uma página, deixe-a acessível e coloque nela uma tag noindex. E nunca bloqueie o site inteiro por engano com “Disallow: /”.

Devo bloquear os robôs de IA?

A escolha é sua. Bloqueá-los evita que os seus textos sejam usados no treinamento, mas alguns desses robôs também alimentam as respostas dos assistentes (o OAI-SearchBot ou o PerplexityBot, por exemplo): bloqueá-los pode deixar você menos visível nessas respostas. O Google-Extended não muda nada na sua presença na Pesquisa Google. E o robots.txt é um pedido: os robôs bem-comportados o respeitam, mas ele não bloqueia o acesso tecnicamente. O arquivo proposto aqui mantém a escolha do seu arquivo atual.

O meu site já tem um robots.txt?

Digite o seu endereço no alto desta página: a ferramenta carrega o seu arquivo atual ou avisa que você ainda não tem um. Você também pode digitar o seu endereço seguido de /robots.txt no navegador, por exemplo meusite.com.br/robots.txt. Muitos CMSs criam um automaticamente: leia “O que muda” antes de substituí-lo.

O que acontece com o endereço que eu digito?

O semchat lê a página pública nesse endereço, e o robots.txt do site, como qualquer visitante poderia fazer. Trechos da página vão para uma IA que escreve o resultado. Nada fica guardado além de um cache de 24 horas, que permite responder na hora se o mesmo endereço for verificado de novo.

E o resto do seu site?

A verificação grátis lê a sua página inicial em poucos segundos e diz o que melhorar primeiro, sem cadastro.

Todas as ferramentas grátis

Pronto para fazer seu site decolar?

Faça sua primeira pergunta - o semchat responde com um plano de ação claro em segundos.

Grátis · sem cadastro · em 5 segundos