User-Agent é uma string de texto enviada em todos os pedidos HTTP que identifica o programa a fazer o pedido, seja um navegador usado por uma pessoa ou um bot automatizado como o Googlebot.
Definição abrangente
User-Agent é uma string de texto enviada em todos os pedidos HTTP que identifica o programa a fazer o pedido, seja um navegador usado por uma pessoa ou um bot automatizado como o Googlebot.
Cada vez que um browser ou um crawler acede a uma página, envia um cabeçalho User-Agent que identifica quem está a fazer o pedido, por exemplo Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) para o rastreador principal da Google.
Porque é que o User-Agent importa em SEO técnico
Os servidores e os ficheiros robots.txt usam esta informação para identificar visitantes e, quando necessário, aplicar regras diferentes consoante o visitante seja humano ou automatizado, ou consoante o crawler específico.
Podes bloquear ou permitir crawlers específicos por nome, como User-agent: GPTBot, sem afetar o Googlebot nem os visitantes humanos.
Cloaking e testes com User-Agent
Servir conteúdo diferente consoante o User-Agent detetado, mostrando uma versão otimizada só aos crawlers, é uma prática chamada cloaking, e é explicitamente penalizável pelas diretrizes da Google, mesmo quando a intenção não é claramente maliciosa.
Ferramentas como o Screaming Frog permitem alterar o User-Agent do rastreio para simular exatamente o que o Googlebot vê, o que ajuda a diagnosticar problemas de renderização ou de acesso bloqueado por engano, sem depender de suposições.
Partilha este conteúdo: