User Agent no protocolo HTTP
O termo User Agent se refere ao programa que faz o download de uma página do site a partir do servidor. Normalmente, esse programa é um navegador. Mas nem sempre - existem outros programas que obtêm páginas de sites. Por exemplo, os robôs de mecanismos de busca que analisam o texto da página e mostram o site nos resultados de pesquisa.
Os programas que acessam o servidor geralmente
enviam um cabeçalho especial User-Agent,
contendo o nome do programa, o sistema operacional
do computador e o idioma do usuário.
O formato geral do cabeçalho para navegadores é o seguinte:
User-Agent: Mozilla/5.0 (system-information) platform
Como você pode ver, para qualquer navegador, o valor do cabeçalho começa com Mozilla/5.0. Isso é necessário por razões históricas.
Exemplo de valor do cabeçalho no navegador Firefox no Windows:
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:47.0) Gecko/20100101 Firefox/47.0
Exemplo de valor do cabeçalho no navegador Firefox no MAC:
Mozilla/5.0 (Macintosh; Intel Mac OS X x.y; rv:42.0) Gecko/20100101 Firefox/42.0
Exemplo de valor do cabeçalho no navegador Chrome no Linux:
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.103 Safari/537.36
Exemplo de valor do cabeçalho para o robô do Google:
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Abra as ferramentas de desenvolvedor do navegador e estude
o conteúdo do cabeçalho User-Agent.