Google change son crawler dédié aux smartphones

Le nouvel user-agent du Googlebot doit améliorer l'indexation du contenu pour smartphone.

Afin d'empêcher certains erreurs d'indexation, Google va lancer "d'ici trois ou quatre semaines" un nouveau robot d'indexation dédié au smartphone. L'actuel "Googlebot-mobile" pour smartphone va donc laisser sa place à un nouveau robot, simplement identifié comme "Googlebot" mais dont l'user-agent précisera bien qu'il vise les smartphones.

 L'user-agent du nouveau Googlebot pour smartphone :

Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

 L'user-agent de l'ancien Googlebot pour smartphone est quasiment identique, mais il était identifié comme "Googlebot-Mobile".

Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

Ce changement n'impacte pas les autres robots, ni le Googlebot classique, ni ceux dédiés aux "feature phones". En revanche, il ne faudra pas oublier que le nouveau Googlebot pour smartphone va désormais suivre les indications adressés au "Googlebot" et non au "Googlebot-Mobile", certains fichiers robots.txt devant par exemple être modifiés en conséquence...