Chaque mois, le JDN et Witbe comparent les performances
des sites d'un secteur donné sous l'angle de
la disponibilité et de la rapidité. Ce
mois-ci, nous avons opté pour les services de
webmail.
Chaque mois, Witbe compare
pour le JDN les performances des sites d'un secteur
donné sous l'angle de la disponibilité et de la rapidité.
Pour établir ce nouveau classement, le JDN a sélectionné
les sept principaux services de webmail et les mesures
de Witbe ont été effectuées en accès
à très haut débit en France, du
23 septembre au 12 octobre 2003. Pour ce benchmarking,
Witbe a mesuré toutes les heures, 24 heures sur
24, le comportement type des utilisateurs depuis l'accès
à la page d'accueil jusqu'au chargement de la
boîte de réception. Cette étude
évalue la qualité d'accès à
l'interface (capacité et temps d'éxécution
total nécessaire pour aller jusqu'à la
boîte de réception), et non la qualité
du service de messagerie en lui-même (temps de
réception et d'envoi des messages).
Lire
la méthodologie
Le classement
des services de webmail (*)
Période du 23/09/03 au 12/10/03 (6 octobre exclu) |
| Rang |
Nom du service |
Indice de performance
|
Temps du déroulement du scénario
(sec.)
|
Taux
de réussite
des tests
|
| 1ex |
La Poste
|
92
|
5,2
|
100
%
|
| 1ex |
Voila
Mail |
92
|
4,6
|
99,6
%
|
| 3 |
Netcourrier |
90
|
2,8
|
97,1
%
|
| 4 |
Yahoo
|
89
|
4,3
|
95,3
%
|
| 5 |
Hotmail
|
70
|
18,2
|
98,5
%
|
| 6 |
Hotmail payant |
67
|
20,5
|
98,5
%
|
| 7 |
Caramail |
58
|
18,3
|
90,3
%
|
Source
: Witbe - Journal du Net, octobre 2003
Par
rapport à la même étude,
réalisée il y a un peu plus d'un an, deux
nouveaux webmails ont été analysés
: il s'agit de Netcourrier, un service gratuit
développé par Plurimédia (filiale
du groupe Lagardere Active) et de la version premium
de Hotmail. Le service payant de Yahoo, Yahoo Gold,
n'a pas pu être analysé pour cause de non
disponibilité au moment de l'étude. La
POste et Voila, deuxième et troisième
en 2002, sont restés dans le peloton de tête
en grimpant tous les deux d'un cran. En revanche, Yahoo
est tombé de la première à la quatrième
place du classement, Netcourrier entrant en troisième
position. Hotmail et Caramail ferment toujours la marche.
Globalement, les temps d'exécution ont diminué
pour la plupart des services, et la disponibilité
est restée stable.
La
Poste confirme ses performances, et réussit
même à les améliorer. C'est le seul
service qui affiche 100% de réussite aux tests.
Cependant, ce n'est pas le webmail le plus rapide, bien
qu'il n'y ait besoin de franchir que deux étapes
pour entrer dans sa boîte de réception.
La Poste conserve donc une marge de progression significative.
Par ailleurs, elle obtient de bons résultats
en termes de fréquentation. Au palmarès
Médiamétrie//NetRatings des services webmails les plus
consultés en France, au cours de la saison estivale,
elle s'est hissée en cinquième position
(lire l'article
du JDNet du 25/09/03).
Voila
partage la première place de ce classement avec
La Poste, en présentant une plus grande rapidité
(malgré une page de plus, puisqu'il faut passer
par la page d'accueil du portail pour accéder
au webmail) mais un taux de résussite inférieur
de 0,4 points. Ses performances se sont elles aussi
améliorées depuis l'année dernière
Netcourrier,
en troisième position de l'étude Witbe/JDN,
bat à plate couture tous les autres webmails
en termes de rapidité. Il suffit de 2,8 secondes
en moyenne pour accéder à la boîte
de réception sur ce service, ce qui est très
rapide. Sa performance globale pâtit des problèmes
d'accessibilité de sa homepage.
Yahoo,
le seul service nécessitant quatre étapes
pour aboutir à la boîte de réception,
réussit malgré cela à atteindre
la deuxième meilleure note en temps d'éxécution,
soit 4,3 secondes. Mais le taux de réussite constaté
est passé de 99,87% il y a un an à 95,3%
cette année. Les problèmes de disponibilité
sont plutôt localisés à partir de
l'authentification. Visiblement, Yahoo Gold souffre
également de problèmes de disponibilité.
MSN
Hotmail affiche un indice de performance de 70,
loin des quatre premiers de ce classement, qui s'explique
par un temps de déroulement du scénario
beaucoup plus long que ses concurrents : 18,2 secondes,
ce qui, même en absolu, est rédhibitoire. Pourtant,
cela n'empêche pas le webmail de figurer en première
position du classement d'audience des dix webmails les
plus visités cet été. Cette lenteur s'explique
par ses une connexion sécurisée https
et le temps de chargement de l'environnement MSN Passport.
Quant à la version payante de Hotmail, elle arrive
juste derrière, avec un temps d'éxécution
encore plus long mais une disponibilité équivalente
de 98,5%, soit un bon score. L'offre premium offre notamment
un espace de stockage étendu.
Caramail
reste dernier de ce classement, avec un indice de performance
global faible (58), inférieur à celui
de l'année dernière (59), en raison d'une
moins bonne disponibilité (90,3%). Les problèmes
de disponibilité sont rencontrés essentiellement
après l'authentification, puisque la page d'accueil
un pourcentage supérieur à 98%. Les erreurs,
selon les tests, vont du "timed out" à
l'erreur interne de serveur, en passant par un retour
à la page de login. Cependant,
il faut noter que pendant la période de test,
une page de publicité était insérée
après l'authentification. Cet élément
a été pris en compte dans les mesures
effectuées par Witbe (sans ce retraitement le
taux de disponibilité aurait atteint 85,4%).
|
A noter
|
- Cette étude a été réalisée avec la solution Web Advanced Monitoring
de Witbe.
- Scénario consistant en un enchaînement de pages
: depuis l'accès à la home page jusqu'au chargement
de la boîte de réception. En fonction des sites
et de leur ergonomie, l'enchaînement comprend de
2 à 4 pages. L'intégrité du contenu des pages successives
est validée par la recherche de mots clés pré-définis.
Le navigateur utilisé par les robots Witbe est Internet
Explorer 6.
- Mesure effectuée toutes les heures, 24h/24 soit
455 connexions par site.
- Aucun élément n'est en cache du navigateur, et
aucun cookie n'est présent.
- Point de départ des scénarios testés et nombre
de pages enchaînées
La Poste : 2 étapes à partir de www.laposte.net
Netcourrier : 2 étapes à partir de www.netcourrier.com
Hotmail : 3 étapes à partir de www.hotmail.fr
Hotmail premium : 3 étapes à partie de www.hotmail.fr
Voilà : 3 étapes à partir de www.voila.fr
Caramail : 3 étapes à partir de www.caramail.fr
Yahoo : 4 étapes à partir de www.yahoo.fr s
|
Tous
les benchmarkings
|