Comparatif cloud : Numergy détrône Google sur les performances

Comparatif cloud : Numergy détrône Google sur les performances Google n'est plus premier du classement CloudScreener / Cedexis. Une place qu'il occupait depuis son entrée dans le palmarès en avril dernier.

Lors de cette nouvelle édition du palmarès mensuel des clouds CloudScreener / Cedexis pour le JDN, Google cède sa place de leader. Une position qu'il occupait pourtant depuis son entrée dans le classement en avril dernier. C'est l'Italien Aruba qui en prend la tête. "Aruba bénéficie à la fois d'une légère amélioration de ses performances et d'un léger recul de l'indice du prix pratiqué Google, dû à un taux de conversion qui joue en sa défaveur", commente Anthony Sollinger de CloudScreener. "L'écart entre les deux acteurs est mince, cela pourra donc encore évoluer dans les prochains mois", poursuit-il. Joyent et Amazon Web Services perdent quant à eux une place, pour cause de performance en baisse. Et ce, au profit de Rackspace et Microsoft.

En matière de performance pure, grosse surprise : c'est Numergy qui prend la tête de cette catégorie. Il passe devant Rackspace... et surtout Google.

Pour compléter ce classement mensuel, le JDN a mis en place en partenariat avec Cedexis un service cartographique permettant de comparer la performance des principaux clouds sur les dernières 24h en fonction des régions du monde.

 
Classement général des clouds CloudScreener / Cedexis
Classement Performance / Prix Fournisseur Indice Performance / prix
Source : CloudScreener / Cedexis
1 Aruba 89
2 Google Compute Engine 87
3 Numergy 84
4 Cloudwatt 72
5 ikoula 70
6 Rackspace 63
7 Joyent 57
8 Microsoft Azure 54
9 Amazon Web Services 53

Cloud : comparatif de la performance

Joyent nous avait habitué à un positionnement plutôt bon dans le classement dédié aux performances. Son cloud s'est souvent hissé parmi les trois premiers. En septembre, il occupait même la première place. En octobre, c'est donc une véritable douche froide pour l'Américain qui rétrograde à la septième place du comparatif des performances... Les raisons de cette chute ? Un temps de réponse (médian) qui passe de 67 à 73 millisecondes, mais surtout un taux de disponibilité qui s'effondre de à 95,61%. Un problème qui semble limité à la zone d'Europe de l'Ouest de Joyent (précisément celle qui est prise en compte pour le classement), et donc son data center d'Amsterdam. La baisse est aussi restreinte dans le temps, sur la période du 2 au 6 octobre, selon les mesures remontées par Cedexis. Le 3 octobre, le taux de disponibilité de Joyent tombe par exemple à 73% (voir le tableau de bord de Cedexis pour ce jour là) et le 5 octobre à 66%... 

Amazon Web Services (AWS) cède aussi une place, et se classe en bon dernier du classement performance, derrière Microsoft Azure. AWS enregistre des performances légèrement moins bonnes qu'en septembre, notamment sur le plan du temps de réponse.

"A l'inverse, les performances de Numergy se sont nettement améliorées avec un retour de bonnes performances sur la partie réseau comparé au mois précédent, et une progression sur les disques", analyse Anthony Sollinger. Sur les indicateurs liés au disque en effet, le cloud souverain enregistre des niveaux rarement atteints : 6 610 opérations d'entrée-sortie par seconde (contre 4 919 en septembre), et une bande passante de 441 428 Mo/s (contre 134 147 Mo/s en septembre). Le cloud souverain se paie même le luxe d'occuper la première place du palmarès dans cette catégorie.

 
Classement des performances des clouds CloudScreener / Cedexis
    Réseau* Réseau* Disque** Disque** CPU** RAM**
Source : CloudScreener / Cedexis
Fournisseur Indice Tps de réponse Tx de dispo IOPS Bande passante Events/s Vitesse transfert
1-Numergy 99 60 ms 99,36% 6 610 441428 Mo/s 81 1990 Mo/s
2-Rackspace 87 72 ms 99,57% 1 928 179504 Mo/s 232 1063 Mo/s
3-Aruba 86 61 ms 99,62% 7 710 89460 Mo/s 54 2189 Mo/s
4-Google Compute Engine 85 67 ms 99,62% 1 477 72084 Mo/s 74 1443 Mo/s
5-Cloudwatt 76 60 ms 99,37% 499 193831 Mo/s 57 1069 Mo/s
6-Ikoula 73 62 ms 99,58% 809 260913 Mo/s 200 341 Mo/s
7-Joyent 72 73 ms 95,61% 2 958 165808 Mo/s 64 1705 Mo/s
8-Microsoft Azure 47 79 ms 99,39% 350 33434 Mo/s 61 145 Mo/s
9-Amazon Web Services 43 92 ms 99,36% 2 070 33339 Mo/s 34 161 Mo/s

* Mesures Cedexis
** Mesures CloudScreener

Définitions :
 Temps de réponse : temps de réponse médian en millisecondes (mesuré par Cedexis pour tous les FAI depuis la France)
 Taux de disponibilité : taux de disponibilité médian en pourcentage
(mesuré par Cedexis pour tous les FAI depuis la France)
 IOPS : nombre
moyen d'opérations d'entrée-sortie par seconde (test 100% en écriture random 4Ko)
 
Bande passante : bande passante moyenne en mégaoctets par seconde (test 100% en écriture séquentielle 1Mo)
 CPU / Events/sec : nombre moyen d'événements traités par seconde (partant de 32 process lancés toutes les 60 secondes avec l'outil SysBench)
 RAM / Vitesse transfert : vitesse de transfert moyenne en mégaoctets par seconde

 

Cloud : comparatif de prix

Pas d'évolution dans la catégorie des prix. "La baisse de tarifs de Google annoncé le 1er octobre avait déjà été prise en compte dans l'édition précédente du palmarès", précise Anthony Sollinger. Les autres réductions intervenues récemment, notamment chez Microsoft, n'impactent pas le classement car elles portent sur des services qui ne sont pas repris dans les configurations de cas client de référence utilisées par CloudScreener pour calculer son indice.

 
Classement des prix des clouds par types de projet
Classement prix Indice prix Prix instance "type M" Linux Prix instance "type M" Windows Prix cas client n°1 Prix cas client n°2 Prix cas client n°3
Source : CloudScreener
1-Aruba 92 40 € 40 € 120 € 493 € 369 €
2-Google Compute Engine 89 29 € 52 € 158 € 548 € 328 €
3-Numergy 70 40 € 56 € 169 € 988 € 392 €
4-Cloudwatt 69 41 € 72 € 216 € 675 € 364 €
5-Ikoula 67 44 € 76 € 229 € 672 € 366 €
6-Amazon Web Services 62 46 € 79 € 237 € 753 € 403 €
7-Microsoft Azure 59 51 € 82 € 246 € 747 € 428 €
8-Joyent 41 69 € 173 € 324 € 1 048 € 580 €
9-Rackspace 39 86 € 109 € 329 € 1 231 € 697 €

Les prix et performances indiquées pour Numergy sont ceux de l'offre V1 (VMware)

 
Les types de projet
  Infrastructure cloud Type de besoin métier
Source : CloudScreener
*Petit projet Trois instances de type "moyenne" + 13 Go/mois de trafic sortant (1Mbps), OS : Windows, utilisation à 100% (730h), sans engagement de durée. Hébergement d'application métier, 30 à 50 utilisateurs, disponibilité : 99,99%
**Projet moyen Six instances de type "moyenne" + 3 instances de type "large" + 75 Go de stockage block, 2 To/mois de trafic sortant (80 Mbps), OS Linux, utilisation à 100% (730h), sans engagement de durée. Hébergement de site d'e-commerce, 300 000 à 500 000 visites par mois, disponibilité : 99,99%
***Grand projet Quatre instances de type "large" + 2 instances de type "extra larges" + 50 Go de stockage block + 250 Go/mois de trafic sortant (8Mbps), OS Linux, utilisation à 50% (365h), sans engagement de durée Hébergement d'application métier, 750 à 1 000 utilisateurs, disponibilité : 99,9%

Méthodologie : le classement CloudScreener / Cedexis / JDN est élaboré grâce à la plate-forme de supervision Performance / Prix mise au point par CloudScreener pour supporter son comparateur de clouds en ligne, et à l'infrastructure de supervision réseau de Cedexis.
Les indices de prix sur lesquels repose le classement sont calculés à partir de plusieurs indicateurs : le prix d'instances types, et de configurations cloud adaptées à trois périmètres de projet métier. Quant aux indices de performance, ils recouvrent des indicateurs de performance (IOPS, RAM, CPU...), issus du système de supervision de CloudScreener, et les indicateurs de performance réseau de Cedexis.

 Lire la méthodologie dans son intégralité: