Bloqueio de crawlers de IA
Verifica se o teu robots.txt bloqueia bots de IA como GPTBot ou ClaudeBot, limitando a tua visibilidade em IA.
O que verifica
Este scanner verifica se o teu ficheiro robots.txt bloqueia os bots de IA, como o GPTBot da OpenAI ou o ClaudeBot da Anthropic. Deteta regras que impedem esses rastreadores de aceder ao teu conteúdo.
Porque importa
Se bloqueias os crawlers de IA, esses assistentes não conseguem ler o teu site nem citar-te nas suas respostas, reduzindo a tua visibilidade justamente onde a busca está a crescer. Às vezes este bloqueio é ativado por omissão ou por copiar modelos sem querer.
Como se corrige
Revê o teu robots.txt e remove as regras que bloqueiam bots de IA se queres que o teu conteúdo apareça nas suas respostas. Se preferes permitir só alguns, ajusta as diretivas para dar acesso aos rastreadores que te interessam.
Verifica-o no teu site
Analisa o teu site grátis e vê se esta e outras 44 verificações passam, com um fix prompt por cada problema.
Analisar o meu site grátis