Qui est Witbe ?
Witbe (www.witbe.net) édite pour les entreprises les solutions logicielles complètes qui permettent de gérer la performance des systèmes d'information.
Les outils Witbe mesurent de bout en bout la qualité délivrée à l'utilisateur, alertent et diagnostiquent en cas de dysfonctionnement, fournissent des indicateurs adaptés aux directions informatiques et aux maîtrises d'ouvrage pour les aider dans leurs prises de décisions stratégiques.
Plus de 300 grandes entreprises utilisent quotidiennement les technologies Witbe pour contrôler et optimiser la qualité de leur système d'information dans le monde entier.

En savoir plus

Classement ADSL

Objectif de l'étude
L'objectif du banc d'essai des FAI Witbe-Le Journal du Net-L'Internaute Magazine est de fournir aux internautes des indicateurs objectifs sur la qualité des services d'accès Internet haut débit des principaux fournisseurs d'accès Internet du marché français.
La qualité d'un FAI est évaluée suivant deux axes :
· La qualité de la connexion : disponibilité de la connexion
· La qualité des usages les plus courants au travers de cette connexion : websurfing, téléchargement de fichiers, et prochainement messagerie.

Les FAI sont classés en fonction d'un indice de performance globale (sur 100) synthétisant la qualité de la connexion et des usages constatés par Witbe. La qualité mesurée ne vaut naturellement que pour la période de temps concerné et ne présage en aucune façon de la qualité permanente des fournisseurs d'accès testés.
La technologie Witbe, sa méthodologie de test (cibles, fréquences etc) et les grilles de scoring utilisées pour le classement sont reconnus et validés par les principaux fournisseurs d’accès.

Panels des offres haut débit testées
Dans le cadre de cette étude Witbe teste les pack modem ADSL2+ et les offres câbles de débit IP équivalent.

Les éventuelles fonctions téléphonie et télévision ne sont pas activées.

Périmètre géographique des tests
Les tests des FAI ADSL sont réalisés depuis un point de mesure unique situé à Courbevoie (92). UPC-Noos est testé depuis Paris (15ème arrondissement) et Numericâble à Issy les Moulineaux (92).

Les robots Witbe utilisés pour cette étude
Les tests sont conduits de manière automatique, 24 heures sur 24 et 7 jours sur 7, par les robots Witbe (sous Windows XP).

Witbe utilise un robot par fournisseur. Tous les robots sont identiques au niveau hardware, OS, logiciels du marché et logiciels Witbe.
Seul AOL dispose d'une spécificité : l'installation et l'utilisation de son kit AOL9 (pour la connexion, le websurfing et la messagerie). Pour les autres FAI, les connexions sont configurées manuellement (sans le kit d'installation) en suivant les recommandations des FAI. Par ailleurs, afin de disposer de configurations les plus proches possible de celles des utilisateurs, nous avons modifié les principaux paramètres systèmes (MTU, RWIN etc) conformément à ce qu'auraient fait les kits d'installation.

Principales caractéristiques de ces robots : Serveur 1U, processeur à 2,8 Ghz avec 1 Go de RAM , Windows XP SP2, Internet Explorer 6

En savoir plus

Classement ADSL

Procédure générale des tests
Le banc d'essai repose sur l'exécution d'une session de tests identique toutes les 15 minutes, 24 heures sur 24 et 7 jours sur 7.
Cette session comporte :
- Un test de disponibilité réseau visant à déterminer le taux de réussite des connexions
- Le chargement consécutif de dix pages Web
- Le teléchargement d'un fichier d'un poids significatif depuis un serveur neutre basé en France
- Et prochainement un test de disponibilité des systèmes de messagerie (envoi et réception) vis-à-vis d'un destinataire neutre, externe à tous les FAI.

Compte tenu du mode de connexion permanent, le test de disponibilité de la connexion consiste à s'assurer de la capacité à sortir du réseau du FAI.

Le chargement des dix sites Web est réalisé sans vider le cache d'Internet Explorer et en bloquant les pop-up, via Internet Explorer 6 pour la plupart des FAI, et via le client AOL9 pour AOL.

Panel de sites web et Serveur référent pour le téléchargement
Les tests de websurfing consistent dans le chargement successif des homepages d'un panel de sites web de renom sans vider le cache et en bloquant les pop-up. Les 9 homes pages testées : tf1.fr, google.fr, sncf.com, download.com, microsoft.com/france , lemonde.fr, fnac.com, Linternaute.com, mozilla.org.

Test de téléchargement national en sortie de réseau des FAI.
En matière de bande passante (débit) ou temps de réponse, la responsabilité du FAI porte sur le périmètre qu’il peut maîtriser à savoir son infrastructure nationale et ce jusqu’à l’internet global (pouvant être matérialisé par un nœud d’échange par exemple). Pour ce banc d'essai, afin de mesurer le débit délivré sur un périmètre national incluant la sortie Internet, nous réalisons nos tests de téléchargement sur un serveur neutre (hors des réseaux des FAIs ou de leurs opérateurs) accessible sans cascades et interconnecté avec quasiment tous les réseaux Internet français.

Composition de l'indice de performance globale
Le classement des FAI se base sur l'indice de performance globale P de chaque FAI. L'indice maximum est de 100.
P = C + U où :
C = indice de qualité de la connexion (sur 50)
U = indice de qualité des usages (sur 50)
Plus P est élevé, meilleur est, d'un point de vue technique et dans les conditions de nos tests, le service proposé par le FAI.

Les principes d'évaluation et de notation des FAI présentés ci-après sont le fruit d'un travail collaboratif entre Witbe, Le Journal du Net et les FAI.

Composition de l'indice de performance (P) sur 100 :

Principes de calcul des scores des FAI sur chacun des critères

Indice "Disponibilité" ( /50)
Il s'obtient par la formule suivante : 0,5 * (taux de réussite) - Malus :

Indice Web (/25)
La méthode de scoring utilisée pour les tests Web est relative. La performance Web d'un FAI est alors évaluée en comparant son temps de chargement avec celui du plus rapide et avec la moyenne du panel. La comparaison au meilleur et à la moyenne ont un poids identique de 50%.
- Ecart au meilleur : le meilleur obtient le maximum de points soit : [50%*25]. Les points obtenus par les autres dépendent de leur écart relatif au meilleur.
- Respect de l’état de l’art : un FAI affichant un temps de chargement égal à la moyenne du panel obtiendra la moitié des points associés au critère soit : [(50%*25)/2]. Les points obtenus dépendent de l’écart relatif à la moyenne.

Indice Téléchargement sur la plage horaire 17h-23h (/25)
L'indice de téléchargement est calculé sur la base du taux d'atteinte de l'objectif de débit (7,7 Mbit/s IP) aux heures chargées : entre 17h et 23h. Ainsi lors de chaque session (toutes les 15min, 7j/7) sur cette plage horaire, nous contrôlons que le débit délivré est au moins égal à 7,7 Mbit/s IP (valeur atteignable par tous les acteurs). Le taux d'atteinte de l'objectif correspond au nombre de fois où l'objectif est atteint sur le nombre total de test. L'indice de téléchargement est obtenu en divisant cet indice par 4.

Le temps de déroulement de la navigation de référence correspond au temps nécessaire au chargement consécutif de toutes les pages constituant le scénario de test.

En savoir plus

Classement ADSL

Les indicateurs délivrés
Le nombre d’échecs de connexion correspond au nombre de fois où il a été impossible de se connecter au FAI. Une connexion est réputée réussie si la connexion technique est effective (réception de l'adresse IP) et que nous avons de la bande passante internet.

Le taux de réussite des connexions  correspond au rapport entre le nombre de tentatives ayant abouti sur le nombre total de tentatives (4 par heure en ADSL 24h/24 et 7j/7).

Le temps de déroulement de la navigation de référence correspond au temps nécessaire au chargement consécutif de toutes les pages constituant le scénario de test (neuf pages au total).

Le taux d'atteinte de l'objectif de débit correspond au nombre de fois où l'objectif de 7,7 Mbit/s est atteint sur le nombre total de tests réalisés entre 17h et 23h, 7j/7.

Processus de publication
Les résultats du benchmarking sont communiqués simultanément par Witbe au Journal du Net et aux fournisseurs d'accès ainsi testés. Ces derniers ont un délai de trois jours ouvrables pour apporter, s'ils le souhaitent, les précisions ou commentaires de leur choix qui seront alors apportés à la connaissance des internautes.