Chaque mois, le Journal du Net et Witbe comparent les performances
des sites d'un secteur donné sous l'angle de la disponibilité
et de la rapidité. Comme lors des trois comparatifs précédents,
pour mesurer la qualité de l'accès à l'interface des messageries
en ligne, nous avons retenu comme scénario le cheminement d'un
nouvel utilisateur qui passe par la page d'accueil du service
pour accéder à sa boîte de réception. Selon les sites, cela
peut impliquer 2 à 4 étapes, entre l'accès depuis la home page
du site et la consultation de la messagerie, après la saisie
de l'identifiant et du mot de passe.
A l'instar de ce qui avait été réalisé pour le comparatif du
mois de mars 2005, la méthode de mesure de ces tests a pris
en compte les temps d'affichage à l'écran, afin de se placer
au plus proche de l'expérience des internautes. De même, pour
ces mesures, le navigateur ne comporte aucun élément en cache
ni aucun cookie, ce qui permet de tester la perception d'un
utilisateur se connectant pour la première fois. En revanche,
le temps maximum d'accès à la boîte de réception a été réduit
de 90 à 60 secondes, pour prendre en compte le fait que les
utilisateurs abandonnent leurs tentatives d'accès à leur boîte
de messagerie au-delà d'une minute, en cas de ralentissement
du système.
Les tests ont été réalisés toutes les trente minutes, 24 heures
sur 24, du 8 août au 4 septembre 2005, depuis Paris via un accès
à très haut débit (plusieurs dizaines de Mbit/s) et des connexions
à partir de multiples opérateurs. Afin d'évaluer la rapidité
des services de messagerie en ligne, les tests ont permis d'effectuer
le calcul du temps d'exécution total de la transaction jusqu'à
la visualisation de la boîte de réception. En ce qui concerne
l'indicateur de disponibilité, les tests évaluent la capacité
de l'internaute jusqu'au bout de l'opération sans encombre,
dans ce délai ramené à 60 secondes.
Le
classement des messageries gratuites sur Internet
(du
08/08 au 04/09/2005) |
| Rang |
Site |
Indice
de performance (/100) |
Temps
d'exécution du scénario
(sec.) |
Taux
de réussite des tests
(%) |
Nombre
d'étapes |
|
1
|
Voila
|
90,1 |
14,8 |
99,82 |
3 |
|
2
|
Gmail
|
86,2 |
14,6 |
99,46 |
2 |
|
3
|
Free
|
86,1 |
11,9 |
98,98 |
3 |
|
4
|
Yahoo
|
81,6 |
17,3 |
99,23 |
4 |
|
5
|
Netcourrier
|
80,8 |
15,2 |
98,92 |
3 |
|
6
|
Hotmail
|
75,2 |
21,3 |
99,31 |
3 |
|
7
|
Tiscali*
|
67,4 |
27,8 |
99,06 |
4 |
|
8
|
La
Poste
|
60,5 |
12,7 |
96,29 |
2 |
|
9
|
Caramail
|
7,1 |
28,8 |
87,96 |
3 |
|
--
|
Moyenne
|
70,1 |
18,3 |
97,67 |
-- |
Source
: Witbe - Journal du Net, août 2005
*Le Webmail de Tiscali est devenu Alice à partir
du 23 août |
Les résultats de cette nouvelle édition du comparatif
bouleversent le classement établi en mars dernier (lire l'article
du 09/03/2005). Bien que demeurant un des services de messagerie
en ligne les plus rapides, grâce à son ergonomie en deux clics,
La Poste perd sa traditionnelle première place en raison d'un
taux de disponibilité chutant à 96,97 %, contre 99,81 %
en février. Le système de malus pénalisant les échecs de connexion
fait tomber l'indice de performance de La Poste à 60,5/100 et
classe le service au huitième rang. Les procédures de
sauvegarde réalisées en nocturne seraient à l'origine de cette
baisse de disponibilité, Witbe ayant en effet relevé des échecs
de connexion isolés au cours de la nuit.
Cette première place laissée vacante par La Poste a été prise
d'assaut par Voila qui n'était que quatrième lors du
dernier comparatif, transformant l'ordre du peloton de tête.
Le Webmail du portail de France Télécom affiche
le meilleur taux de disponibilité (99,82 %) et un temps
d'exécution du scénario de 14,8 secondes, ce qui lui permet
d'obtenir le meilleur indice de performance (90,1/100) devant
Gmail, Free et Yahoo. Pour sa part, le Webmail de Google confirme
sa progression au sein du panel, accédant à la seconde place
grâce à un temps d'accès à la boîte de réception passant de
16,8 à 14,6 secondes, tout en conservant le même bon taux de
réussite de 99,46 %.
En bas de tableau, Hotmail, le service de messagerie électronique
de Microsoft, améliore son temps d'accès de 29,6 à 21,3 secondes,
le service ayant abandonné le système de cryptage des données
en HTTPS, ce qui lui permet de se hisser à la sixième place.
De son côté, le service de messagerie en ligne
de Tiscali s'est transformé en portail Alice sans encombre dès
le 23 août, suite à son rachat par Telecom Italia (lire l'article
du 07/04/2005). Witbe n'a relevé aucune interruption de
service lors de cette transformation. Toutefois, le temps d'exécution
du scénario reste relativement élevé, de l'ordre de 27,8 secondes,
en raison du chargement du profil et des quatre étapes nécessaires
pour accéder à la boîte de réception. Ces caractéristiques pourront
cependant être modifiées à l'avenir par l'accès à la messagerie
via le portail Alice.
Absent du panel lors des précédents tests, Caramail
arrive en dernière position. Le temps d'accès élevé
est dû à un cheminement de l'internaute en quatre étapes auquel
s'ajoute le chargement d'une page de publicité en Flash entre
la saisie du login et l'entrée dans la boîte de réception. En
outre, de sérieux problèmes d'accessibilité au service (87,96
%) font chuter l'indice de performance globale du Webmail de
Lycos à 7,1/100.
Un faible résultat qui se répercute sur l'indice
moyen de performance du panel, en baisse de 9 points à 70,5/100.
L'intégration de Caramail au panel n'est cependant pas
la seule explication des contre-performances des services de
messagerie électronique. Les Webmail ont été,
de toute évidence, fortement sollicités lors de la saison
estivale en raison des déplacements des utilisateurs qui accèdent
à leur messagerie à distance et qui disposent de plus de temps
pour communiquer. Le taux moyen de réussite des tests par rapport
à février dernier chute ainsi de 1,44 point à 97,67 %.
|
Précision
sur la méthodologie Witbe/JDN
|
- Cette étude a été réalisée avec la solution
Witbe.net.
- Scénario : Enchaînement de pages par pilotage graphique
du navigateur : depuis l'accès à la home page jusqu'au
chargement de la boîte de réception. Le délai maximum
imparti au déroulement du scénario est de 60 secondes.
En fonction des sites et de leur ergonomie, l'enchaînement
comprend de 2 à 4 pages. L'intégrité du contenu des pages
successives est validée par la recherche de mots clés
prédéfinis.
- Le navigateur utilisé par les robots Witbe est Internet
Explorer 6.
- Mesure effectuée toutes les 30 minutes, 24h/24, soit
1.344 tentatives de connexions par site.
- Aucun élément n'est en cache du navigateur, et aucun
cookie n'est présent.
- Point de départ des scénarios testés :
* Tiscali : http://www.tiscali.fr
* Yahoo : http://www.yahoo.fr
* Free : http://www.free.fr
* Hotmail : http://www.hotmail.fr
* Voilà : http://www.voila.fr
* La Poste : http://www.laposte.net
* Netcourrier : http://www.netcourrier.com
* Gmail : http://www.gmail.com
* Caramail : http://www.caramail.lycos.com
Pour connaître le détail de la méthodologie publiée
sur le Journal du Net, cliquez
ici. |
|
