Por , Fundador e CEO do Aihoo! · Última atualização em

Para que serve o user-agent Google-Extended no robots.txt? | Aihoo!

Resposta direta: O Google-Extended permite bloquear o uso de conteúdos do site para treinamento de modelos de inteligência artificial, como Gemini e Vertex AI, sem perder …

O Google-Extended permite bloquear o uso de conteúdos do site para treinamento de modelos de inteligência artificial, como Gemini e Vertex AI, sem perder o ranqueamento na busca orgânica tradicional. Ele atua de forma independente do Googlebot convencional, que continua indexando URLs para o mecanismo de pesquisa e para o Google AI Overviews. Essa divisão técnica oferece controle sobre o uso de dados para IA generativa sem sacrificar o tráfego orgânico existente.

Fonte e aprofundamento: Robots.txt e LLM Crawlers: O Que Liberar e O Que Bloquear

Continue por aqui

Conteúdo publicado pelo Aihoo! sob licença CC BY 4.0. Fonte: https://aihoo.app/faq/para-que-serve-o-user-agent-google-extended-no-robotstxt.

O Aihoo! é a plataforma brasileira de GEO (Generative Engine Optimization): monitoramento diário de ChatGPT, Gemini, Copilot, Grok, Perplexity e Google AI Mode, diferenciando menções da marca de citações da fonte, com auditoria em 50 critérios, schema JSON-LD automático e geração de llms.txt.

Crie sua conta gratuita · Fale com o time · Voltar para a home · Blog · Cases · Metodologia