Chaque mois, le JDN et Witbe comparent les performances des sites d'un secteur donné sous l'angle de la disponibilité et de la rapidité. La méthode de navigation utilisée pour ce test se voulait la plus proche de l'usage des internautes. Les résultats font apparaître le taux d'affichage, et non plus le taux de chargement réseau comme c'était le cas auparavant. Le scénario retenu est le cheminement classique d'un premier utilisateur de webmail qui passe par la page d'accueil. Selon les sites, deux, trois ou quatre étapes sont alors nécessaires pour accéder à la boîte de réception.
Le classement fait apparaître le total du temps d'exécution du scénario, et pénalise les échecs de connexion avec un système de malus. Les sites proposant trois ou quatre pages afin d'arriver à la boîte de réception sont donc pénalisés, tout comme les portails, qui possèdent des structures plus lourdes. Pour mesurer la disponibilité, c'est la capacité à atteindre le compte sans encombre qui a été déterminée, en un délai maximum de 90 secondes.
Le classement des messageries gratuites
(du 01/02 au 27/02/2005) |
| Rang |
Site |
Indice de performance (/100) |
Temps d'exécution du scénario (sec.) |
Taux de réussite des tests (%) |
Nombre d'étapes |
|
1
|
La Poste
|
90,7 |
15,3 |
99,81 |
2 |
|
2
|
Free
|
86,2 |
12,6 |
98,97 |
3 |
|
3
|
Gmail
|
85,5 |
16,8 |
99,46 |
2 |
|
4
|
Voila
|
84,4 |
16,6 |
99,25 |
3 |
|
5
|
Netcourrier
|
84,0 |
14,0 |
98,77 |
3 |
|
6
|
Yahoo
|
83,7 |
19,9 |
99,77 |
4 |
|
7
|
Tiscali
|
72,4 |
31,5 |
99,92 |
4 |
|
8
|
Hotmail
|
48,7 |
29,6 |
96,97 |
3 |
|
--
|
Moyenne
|
79,5 |
19,5 |
99,11 |
-- |
Source : Witbe - Journal du Net, février 2005
NB : Caramail et iFrance n'ont pu être classés : voir les explications.
|
Pour ce benchmarking, les mesures ont été effectuées toutes les 30, 24 heures sur 24. Afin de reproduire au mieux le cas d'un utilisateur qui se connecte pour la première fois, aucun élément n'était en cache du navigateur du testeur et aucun cookie n'était présent sur son ordinateur. Avec une moyenne de performance de 79,5 sur 100, les messageries gratuites sont donc encore loin de l'optimisation. Le temps d'atteinte de la boîte de réception est encore assez élevé (19,5 secondes en moyenne) et il subsiste de nombreux échecs de connexion.
C'est la troisième fois que Witbe se penche sur l'efficacité des services de webmail (lire l'article du 12/09/2002). Comme lors des précédents tests, La Poste apparaît dans les messageries les plus rapides, avec, il est vrai, un avantage puisque le chemin vers la boîte de réception ne comporte que deux étapes. Elle ressort également comme l'un des services les plus fiables, même si elle perd son invincibilité : 99,81 % contre 100 % auparavant. Si le groupe postal vient d'abandonner son activité de FAI (lire l'article du 07/03/05), il conserve son webmail gratuit.
La palme de l'efficacité revient cette fois à Tiscali, avec 99,92 % de réussite aux tests. Le webmail gratuit du FAI d'origine italienne est toutefois affaibli par la lenteur de ses services, puisqu'il hérite aussi du temps d'exécution le plus important, avec une moyenne dépassant les 30 secondes, pour quatre étapes.
Dans le trio de tête, on retrouve Free et Gmail (Google), légèrement distancés, mais qui conservent un indice de performance satisfaisant. Le webmail de Google fait ainsi une entrée mitigée dans le classement, avec quelques erreurs de disponibilité et un temps d'exécution moyen, malgré la présence de deux étapes seulement dans le cheminement classique vers la boîte de réception. La progressive arrivée de Gmail sur le marché pourrait toutefois changer le paysage des messageries (lire l'article du 09/02/2005). De son côté, Free se trouve pénalisé par quelques problèmes techniques, concentrés sur deux journées de test. La messagerie du FAI du groupe Iliad possède pourtant le temps d'accès le plus rapide, avec 12,6 secondes sur trois étapes.
A l'autre extrémité du classement, on trouve Hotmail, qui paie notamment la structure de ses pages et leur poids. Mais la messagerie de MSN est surtout pénalisée par les quelques problèmes techniques qui ont affecté la période de test, notamment une surcharge récurrente ("service indisponible" ou "busy").
Enfin, deux webmails n'ont pas pu être classés. Il s'agit de Caramail et d'iFrance. Dans le premier cas, les modifications récurrentes apportées au site, dans le graphisme, la redirection vers plusieurs URL ou des pages de publicité après la connexion, ont conduit à l'abandon du test. Pour iFrance, aucune valeur n'a pu être dégagée, étant donnés la lenteur et l'indisponibilité du service.
|
Précision
sur la méthodologie Witbe/JDN
|
- Cette étude a été réalisée avec la solution
Witbe.net.
- Scénario : Enchaînement de pages par pilotage graphique du navigateur : depuis l'accès à la home page jusqu'au chargement de la boîte de réception. Le délai maximum imparti au déroulement du scénario est de 90 secondes.
En fonction des sites et de leur ergonomie, l'enchaînement comprend de 2 à 4 pages. L'intégrité du contenu des pages successives est validée par la recherche de mots clés prédéfinis.
- Le navigateur utilisé par les robots Witbe est Internet
Explorer 6.
- Mesure effectuée toutes les 30 minutes, 24h/24, soit 1.296 tentatives de connexions par site.
- Aucun élément n'est en cache du navigateur, et aucun
cookie n'est présent.
- Point de départ des scénarios testés :
* Tiscali : http://www.tiscali.fr
* Yahoo : http://www.yahoo.fr
* Free : http://www.free.fr
* Hotmail : http://www.hotmail.fr
* Voilà : http://www.voila.fr
* La Poste : http://www.laposte.net
* Netcourrier : http://www.netcourrier.com
* Gmail : http://www.gmail.com
- Non publiés :
* Caramail : les modifications très fréquentes opérées sur ce site (graphisme, redirection sur URL différentes, pages de pub après la connexion) ont conduit à abandonner le test de ce site
* iFrance : impossible d'enregistrer le scenario de test sur ce site à cause de sa lenteur et de son indisponibilité
Pour connaître le détail de la méthodologie publiée
sur le Journal du Net, cliquez
ici. |
|
