Ferramenta gratuita
Robots.txt checker grátis para a IA
Cole sua URL e veja instantaneamente quais crawlers de IA conseguem acessar seu site. Lemos seu robots.txt ao vivo e verificamos mais de 15 bots (GPTBot, ClaudeBot, PerplexityBot e mais) para você saber se está bloqueando tráfego de IA sem querer.
Analise seu robots.txt
- 100% grátis
- Sem cadastro
- Resultados instantâneos
Por que os bots de IA importam
O acesso de crawlers no robots.txt é a primeira barreira para casos de uso de treinamento e recuperação.
GPTBot e ChatGPT
Os crawlers da OpenAI (incluindo o GPTBot e agentes relacionados) coletam páginas públicas para a navegação do ChatGPT e usos relacionados ao modelo. Se estiverem bloqueados, é menos provável que o ChatGPT use seu site como fonte.
ClaudeBot
A Anthropic usa o ClaudeBot e o Anthropic-AI para buscar conteúdo web para o Claude. Seu robots.txt é a primeira barreira para decidir se esses agentes podem acessar suas páginas.
PerplexityBot
PerplexityBot alimenta as respostas ao vivo e citações do Perplexity. Bloqueá-lo pode te tirar desses painéis de resposta, às vezes de propósito, às vezes por acidente junto com uma regra ampla de User-agent: * .
Cada bot segue seu próprio grupo de User-agent quando seu arquivo tem um. Um bot sem grupo próprio segue o grupo *, e nós o marcamos como "via *". Linhas User-agent consecutivas compartilham um mesmo grupo, e vale a regra Allow ou Disallow correspondente mais longa, como define o RFC 9309.
Próximo passo
Audite o resto da sua configuração técnicarobots.txt é um sinal. A auditoria completa cobre dados estruturados, renderização e Core Web Vitals para crawlers de IA.
Saia de um retrato único para uma visibilidade em IA sempre ativa
A ferramenta gratuita é um ponto de partida rápido e honesto. A Rank Prompt transforma isso em um programa que monitora, compara e melhora como a IA fala sobre você.
Agora mesmo
Este verificador gratuito
- Verifica mais de 15 crawlers de IA no seu robots.txt
- Busca ao vivo, sem cadastro
- Uma leitura pontual, não monitoramento
O panorama completo
Plataforma da Rank Prompt
- Monitora sua visibilidade no ChatGPT, Gemini, Perplexity, Claude, Grok e Google AI Mode (AI Overviews)
- Roda todo o seu conjunto de prompts de forma agendada, não uma única consulta, uma vez
- Share of voice frente à concorrência e evolução do ranking ao longo do tempo
- Alertas quando você ganha ou perde espaço, além de relatórios exportáveis
- Conteúdo otimizado para IA, auditorias de SEO e insights de citações
Perguntas frequentes
Perguntas frequentes do verificador de bots de IA no Robots.txt
Ainda tem dúvidas? Fale com nossa equipe
O que são bots de IA e por que eles rastreiam meu site?
Bots de IA (como GPTBot, ClaudeBot e PerplexityBot) são crawlers automatizados enviados por empresas de IA para indexar conteúdo web. Esses dados ajudam a treinar modelos de IA e a fornecer respostas em tempo real. Se seu robots.txt bloquear esses bots, os assistentes de IA podem não conseguir referenciar ou recomendar seu conteúdo quando os usuários fizerem perguntas relevantes.
Quais bots de IA devo permitir no meu robots.txt?
No mínimo, permita GPTBot (ChatGPT), ClaudeBot (Claude da Anthropic), PerplexityBot e Google-Extended (Gemini). Eles cobrem as principais plataformas de IA onde compradores descobrem marcas. Bloqueá-los significa que seu conteúdo não será incluído nas recomendações geradas por IA, que cada vez mais é onde as decisões de compra começam.
Como desbloqueio bots de IA no meu robots.txt?
Abra seu arquivo robots.txt (geralmente em yourbrand.com/robots.txt) e remova qualquer regra Disallow para user agents de bots de IA. Por exemplo, se você vir "User-agent: GPTBot / Disallow: /", mude a linha Disallow para "Allow: /" ou remova o bloqueio por completo. Se o bot não for mencionado, ele segue seu grupo User-agent: *, e sem grupo * pode rastrear tudo.
Permitir bots de IA vai prejudicar o desempenho ou a segurança do meu site?
Não. Bots de IA se comportam de forma parecida com crawlers de busca como o Googlebot. Eles leem suas páginas públicas mas não modificam nada. A taxa de rastreamento geralmente é baixa e não afeta o desempenho do servidor. Permiti-los apenas garante que seu conteúdo possa ser referenciado quando assistentes de IA responderem perguntas relevantes.
O que significam "via *" e "sem regra" nos resultados?
"Permitido via *" ou "Bloqueado via *" significa que seu robots.txt não tem um grupo para esse bot, então ele segue seu grupo User-agent: *, como fazem os crawlers que seguem o RFC 9309. "Permitido, sem regra" significa que não existe nem um grupo para o bot nem um grupo *, então nada o impede de rastrear. Um bot com grupo próprio ignora totalmente o grupo *, por isso repita qualquer linha Disallow compartilhada dentro de cada grupo nomeado.
Um bot permitido significa que os crawlers de IA visitam meu site?
Não. O robots.txt só diz quem pode rastrear. Para ver quem rastreou, envie o log de acesso do seu servidor para o Rank Prompt: ele conta as visitas de cada crawler de IA, confere com as faixas de IP que a empresa do crawler publica e lista as páginas que eles leem e os erros que encontram. O guia de logs de crawlers de IA mostra como exportar o log.
Vá além de uma verificação pontual de robots
Monitore a visibilidade em IA ao longo do tempo, compare-se com a concorrência e aja com recomendações claras, não apenas um arquivo estático único.