Open Source et Big data : IBM investit massivement dans Spark

Open Source et Big data : IBM investit massivement dans Spark Des milliers de salariés IBM vont travailler sur cette technologie Open Source connue pour ses capacités de traitement très rapide de grandes quantités de données.

IBM met le paquet sur Spark. Big Blue vient en effet d'annoncer d'énormes investissements sur cette technologie open source. Une solution qui bénéficie du label "Top-Level Project" au sein la fondation Apache depuis l'année dernière, et servant à analyser très rapidement de grandes quantités de données (lire notre article "Big Bata : trois projets Apache qui vont marquer 2015").

Aujourd'hui, IBM fait savoir qu'il va s'engager de multiples façons dans cette technologie. Le géant d'Armonk va d'abord, évidemment, proposer une offre "Spark as a Service" sur son cloud BlueMix. Spark sera aussi intégré à ses plateformes dédiées au commerce et à l'Analytics. Watson va aussi pouvoir en bénéficier. Sa solution de machine learning, IBM SystemML, va devenir open source pour l'occasion, et devra renforcer les capacités d'apprentissage automatique de Spark.

Pas moins de 3 500 salariés d'IBM dans le monde vont travailler sur des projets liés à Spark. Un centre "Spark Technology Center" va aussi être ouvert à San Francisco. Un vice-président senior en charge de l'analytics chez IBM, Robert Picciano a estimé à "plusieurs centaines de millions de dollars" l'investissement que va consentir IBM pour doper le développement de Spark et de son écosystème