WebFora.io

Glossário

O que é robots.txt

Também: ficheiro robots, regras de rastreio, noindex

O robots.txt é um pequeno ficheiro de texto na raiz do seu site que diz aos rastreadores dos motores de busca que partes podem ou não visitar. Uma linha errada pode esconder o site inteiro do Google.

O robots.txt vive em seudominio.pt/robots.txt e contém regras para os rastreadores: «Googlebot, não visites /admin», «aqui está o Sitemap (sitemap.xml)Um sitemap é uma lista legível por máquinas de todas as páginas do site (sitemap.xml) que ajuda o Google a encontrá-las e indexá-las mais depressa. A maioria das plataformas gera-o sozinha; envie-o na Search Console.→». É a placa «só pessoal autorizado» em certas portas. Não protege nada com palavra-passe — é um pedido educado que os motores de busca respeitam — e é também uma causa comum de sites invisíveis: um Disallow: / esquecido da fase de desenvolvimento bloqueia tudo. Para manter uma única página fora dos resultados, a ferramenta certa é uma Meta tags (título e descrição)As meta tags são o título e a descrição da página que o Google mostra nos resultados e que os navegadores mostram no separador. Boas meta tags geram mais cliques; cada página deve ter as suas.→ noindex.

  • Verifique o seu: abra /robots.txt no navegador — Disallow: / sob User-agent: * significa que o Google está trancado fora.
  • Os rastreadores de IA (GPTBot, ClaudeBot…) leem o mesmo ficheiro; permiti-los ajuda o seu negócio a aparecer em respostas de IA.
  • As plataformas gerem-no por si; raramente o edita à mão.

Termos relacionados

Pedir · €39Auditoria