¿Qué robot está generando este agente de usuario?
Mozilla/5.0 (Windows NT 6.1; WOW64; rv:40.0) Gecko/20100101 Firefox/40.1
No había Firefox versión 40.1
Desde los registros del sitio web (a) solo solicita la página de inicio (b) nunca solicita robots.txt (c); se origina en todo el mundo, con frecuencia en los nombres de host de ISP, en miles de visitas de página.
Esta cadena de agente de usuario es utilizada por una fuerza bruta que intenta iniciar sesión como administrador en un sitio de Wordpress. Para mí, el bot lo intentó unas 3000 veces en unas 18 horas sin éxito.
Los títulos de los agentes de usuario pueden ser "falsificados", no hay garantía de que:
Hay varias referencias al mismo agente de usuario en Internet. Por ejemplo, esta cuenta de github tiene una gran lista de agentes, y la que tiene aparece en esta lista:
También aparece en un formato similar a JSON en pastebin:
Clever sys solo aceptan solicitudes de navegadores legítimos para evitar bots. Así que los bots pretenden ser navegadores bien conocidos. El agente de usuario no es más que un encabezado HTTP y puede ser falsificado por cualquier biblioteca HTTP en cualquier idioma. ¿Desea una solicitud de MS / DOS 2.11 o incluso la buena Sinclair ZX81 con lynx? Puedo enviarlo de una vez ...