Méthodologie de l'enquête sur les moteurs de recherche
Pour mener à bien cette enquête qualitative, JDN Solutions a fait exécuter
en parallèle par deux testeurs la même série de 25 requêtes, à la fois sur
Google, Yahoo Search, Live Search, Ask et Voila. Ces requêtes étaient composées
de 15 scénarios simples couvrant l'éventail des besoins courants d'un internaute
(il s'agissait de requêtes marchandes, de demandes de contenu et d'actualité),
et de 10 scénarios complexes (mot rare ou recherche fine).
Les fonctionnalités de "recherche avancée" des moteurs n'ont pas été utilisées.
Pour Google, la recherche a été exécutée sur www.google.fr. Pour Yahoo, sur
le site Yahoo.fr. pour Live, sur le site www.live.com. Pour Ask : sur
les pages francophones et Voila sur www.voila.fr.
A chaque fois, les dix premiers résultats "naturels" affichés (un peu moins
parfois dans le cas de scénarios complexes) ont été examinés et évalués.
Les liens promotionnels ont eux aussi été notés sur leur pertinence et leur
ergonomie. Les tests ont été effectués du 13 au 15 juin 2007.
Critères d'évaluation
Les testeurs ont évalué les performances des moteurs en fonction des critères
suivants :
Pertinence des 10 premiers résultats naturels
» la pertinence des trois premiers
résultats
» la pertinence des sept derniers
résultats
» le taux de résultats redondants
(ou provenant du même site)
» le taux de liens brisés (un lien
brisé détecté équivalant à une note de 0)
» le taux de pages parasites (publicitaires
ou satellites)
Pertinence et ergonomie des liens promotionnels
» la pertinence des liens promotionnels
éventuellement affichés
» la gêne occasionnée par ces liens
promotionnels
Notation
Chaque critère a été noté sur 10. Chaque requête a obtenu une note globale
sur 140 (7 critères notés sur 10 par 2 testeurs).
Chaque moteur de recherche a obtenu une note sur 3 500 points (140 x 25 scénarios),
finalement ramenée à une note sur 10.
