Academia · Auditoria

Como Verificar a Cobertura de Robots.txt e Sitemaps no AmICited

Use a verificação de Robots.txt e Sitemaps na auditoria de Acessibilidade de Agentes do AmICited para confirmar que os crawlers de IA e busca podem ler seu site e que seus sitemaps estão declarados e completos.

2 min read · Média priority

Se os crawlers de IA não conseguem ler seu site, nenhuma das suas outras otimizações importa. A verificação de Robots.txt e Sitemaps confirma que os crawlers que você prioriza têm permissão de entrada — e que seus sitemaps realmente os direcionam ao seu conteúdo.

A seção Robots.txt e Sitemaps da auditoria de Acessibilidade de Agentes

Important
Uma única regra excessivamente restritiva no robots.txt pode bloquear um crawler de IA de todo o seu site. É nesta verificação que você detecta isso antes que lhe custe citações silenciosamente.

Onde encontrar

É a seção Robots.txt e Sitemaps de Auditoria → Acessibilidade de Agentes.

O que verifica

Como a seção explica, ela analisa “se os crawlers importantes de IA e busca têm permissão para ler o site, se os sitemaps estão declarados no robots.txt e quantas URLs esses sitemaps listam no total.” Em resumo:

  • Acesso de crawlers — os principais bots de IA e busca têm permissão (não estão bloqueados) no robots.txt?
  • Declaração de sitemap — um sitemap é referenciado a partir do robots.txt para que os crawlers possam encontrá-lo?
  • Cobertura de sitemap — quantas URLs seus sitemaps listam no total.

Como usar

  1. Confirme se os crawlers têm permissão. Se um bot de IA importante estiver bloqueado, corrija a regra no robots.txt — esta é a questão de maior prioridade na página.
  2. Declare seu sitemap. Certifique-se de que o robots.txt aponte para seu sitemap para que os agentes possam descobrir todas as suas páginas.
  3. Verifique a contagem de URLs. Um sitemap listando muito menos URLs do que você publicou significa que páginas não estão sendo anunciadas aos crawlers.
  4. Reavalie após edições e confirme se os blocos Acesso de crawlers e URLs do sitemap no resumo de prontidão ficam verdes.

O acesso de crawlers é a base: acerte isso primeiro, porque todo o resto presume que os bots conseguem de fato alcançar seu conteúdo.

← Todos os tutoriais da Academia

Pronto para colocar em prática?

Verificação gratuita · Teste de 14 dias · sem cartão de crédito