Nouvel outil de test du fichier robots.txt

Pause
Lors du test d'une modification du fichier robots.txt, les éventuelles erreurs seront indiquées comme ici, avec cette "syntaxe non comprise". ©  Google - capture

Google a lancé en juillet un nouvel outil de test du fichier robots.txt au sein du menu Exploration de Webmaster Tools. Il permet notamment de voir le contenu de ce fichier, mais aussi de le modifier et de vérifier l'absence d'erreurs.

Des URL du site peuvent être testées pour voir si elles sont bien crawlées par les différents robots de Google : le "classique" Googlebot, mais aussi ses déclinaisons comme Googlebot-News ou Googlebot-Mobile par exemple.

Pause