Apple Intelligence, entre innovation et rattrapage technologique

Apple déploie enfin Apple Intelligence, intégrant l'IA dans son écosystème. Malgré son retard, la stratégie d'Apple vise à proposer des innovations marquantes.

Apple Intelligence : une révolution technologique décryptée par Thibault Monteiro.

Depuis quelques mois, Apple a enfin commencé le déploiement de ses nouvelles fonctionnalités d'intelligence artificielle, nommées Apple Intelligence. Ces fonctionnalités, annoncées lors des précédentes keynotes, semblent pourtant accumuler un certain retard face à la concurrence, notamment Google et Samsung, qui offrent des services similaires depuis plus d'un an. Cependant, Apple, fidèle à sa stratégie, semble vouloir transformer cette faiblesse en force.

Les fonctionnalités de base : de l'assistance textuelle à la création d'images

Apple propose désormais des outils permettant de reformuler des mails ou des messages, de résumer des textes ou encore de corriger l’orthographe et la grammaire. Autant de fonctionnalités déjà présentes chez la concurrence, mais ici intégrées de manière transparente dans l’écosystème Apple.

L'une des annonces les plus intéressantes concerne un modèle de génération d’images. Apple a développé un modèle de diffusion qui permet de générer des images à partir d'un simple croquis réalisé avec l'Apple Pencil. Bien que cette fonction soit très encadrée, elle offre la possibilité de créer des illustrations dans des styles tels que le croquis, l'illustration ou l'animation, mais pas encore dans des styles réalistes. De plus, Apple introduit les "Genmojis", des emojis personnalisés générés par IA, permettant aux utilisateurs de créer des emojis uniques et originaux.

Recherche augmentée par IA : la véritable innovation ?

L'une des avancées les plus prometteuses concerne la recherche augmentée dans la bibliothèque photo. Alors que les outils actuels permettent de retrouver des photos en tapant des mots-clés, Apple pousse le concept plus loin. Il sera possible de rechercher des images en utilisant des descriptions contextuelles complexes, comme "un chien au bord d’un lac avec ma nièce". Cette approche indique la direction qu'Apple souhaite prendre : intégrer l'IA de manière transparente et utile au quotidien, sans que l'utilisateur ait l'impression d'interagir avec une technologie complexe.

Notifications intelligentes et Siri amélioré

Apple introduit également des améliorations dans la gestion des notifications. L'iPhone pourra désormais prioriser les notifications en fonction de leur importance et même résumer le contenu des messages reçus, aidant ainsi les utilisateurs à déterminer rapidement si une notification nécessite une attention immédiate.

Siri bénéficiera d'une mise à jour majeure, lui permettant de comprendre le langage naturel et de prendre en compte le contexte de l'utilisateur, y compris les messages, le calendrier et les photos. Fait notable, les utilisateurs pourront désormais interagir avec Siri via du texte, offrant une alternative discrète à la commande vocale. Les développeurs pourront également intégrer des actions de leurs applications avec Siri grâce à l'API App Intents, ouvrant la voie à des interactions plus riches et personnalisées.

On-screen awareness : comprendre et agir sur l'écran

Apple travaille sur une fonctionnalité appelée "On-screen awareness", permettant à l'iPhone de comprendre ce qui est affiché à l'écran et d'effectuer des actions en conséquence. Par exemple, si un ami vous envoie son adresse, vous pouvez demander à Siri d'ajouter cette adresse à sa fiche de contact sans avoir à naviguer manuellement dans les menus. Cette technologie repose sur un modèle appelé "Ferret-UI", conçu pour comprendre les interfaces utilisateur mobiles en identifiant les icônes, les boutons et les éléments interactifs.

Les avancées technologiques issues des recherches récentes

Les publications récentes d'Apple en matière de recherche en intelligence artificielle mettent en lumière les efforts de l'entreprise pour rattraper son retard et innover. Parmi ces travaux, "Speculative Streaming: Fast LLM Inference Without Auxiliary Models" explore des méthodes pour accélérer l'inférence des modèles de langage de grande taille sans avoir recours à des modèles auxiliaires. Cela pourrait améliorer la rapidité et l'efficacité des applications d'IA sur les appareils Apple.

Un autre travail notable est "CTRLorALTer: Conditional LoRAdapter for Efficient Zero-Shot Control & Altering of T2I Models", qui se concentre sur l'adaptation efficace des modèles texte-à-image (T2I). Cela pourrait permettre à Apple de proposer des fonctionnalités avancées de génération d'images tout en conservant une utilisation optimale des ressources.

Thibault Monteiro met en lumière LoRAdapter, qui permet de contrôler la structure et le style dans le processus de génération d'images à partir de modèles texte-image de manière zero-shot. Cette approche offre un contrôle unifié, puissant, précis et efficace sur le conditionnement de la structure et du style en utilisant des blocs LoRA conditionnels.

De plus, la publication intitulée "Apple Intelligence Foundation Language Models" suggère qu'Apple développe ses propres modèles de langage fondamentaux. Ces modèles pourraient servir de base à de nombreuses applications d'IA, renforçant ainsi l'autonomie de l'entreprise dans ce domaine.

Un rattrapage stratégique

Malgré le retard apparent, Apple n'a pas dit son dernier mot. L'entreprise compte sur ses puces M1 et M2 pour traiter les requêtes d'intelligence artificielle localement, renforçant ainsi sa politique de respect de la vie privée. Une approche différente de celle de ses concurrents qui s'appuient davantage sur le cloud. Cependant, cette technologie sera réservée aux appareils les plus récents, comme l'iPhone 15 Pro, ce qui pourrait accélérer le renouvellement des anciens modèles. Les utilisateurs d'appareils plus anciens risquent de se sentir laissés pour compte, ce qui pourrait impacter le marché de l'occasion.

Le partenariat surprenant avec OpenAI : un coup de maître ?

L’intégration de ChatGPT dans les produits Apple marque une étape importante, offrant des capacités d’intelligence artificielle plus poussées. Ce partenariat, étonnant de la part d’Apple, montre une volonté de ne pas être totalement dépendant de ses propres technologies tout en offrant des solutions de pointe à ses utilisateurs. En collaborant avec OpenAI, Apple obtient l'accès à la technologie la plus avancée du marché sans frais directs, tout en continuant à développer ses propres modèles en interne. De plus, Apple pourrait prendre une commission sur les abonnements à ChatGPT Premium souscrits via ses appareils, se positionnant ainsi comme une plateforme accueillant plusieurs modèles d’IA et rendant ses appareils plus flexibles et polyvalents.

Enjeux réglementaires en Europe

Suite à la réglementation européenne visant à réguler les géants de la tech, Apple prétend que cela les empêche de déployer Apple Intelligence sur les iPhones européens. Cependant, certains y voient un coup de bluff destiné à mettre la pression sur les régulateurs. La Commission européenne, de son côté, estime que ces régulations favorisent la concurrence et l'innovation, notamment pour les acteurs européens. Il reste à voir comment cette situation évoluera, mais il est clair que les enjeux réglementaires joueront un rôle clé dans le déploiement des nouvelles fonctionnalités d'Apple en Europe.

Le point de vue de Thibault Monteiro : "Apple joue la carte de la prudence en matière d’IA"

Apple semble opter pour une stratégie prudente mais réfléchie : intégrer l’IA dans son écosystème tout en respectant ses engagements en matière de confidentialité. En misant sur le traitement local des données et en investissant dans la recherche avancée en intelligence artificielle, Apple cherche à offrir le meilleur des deux mondes. Les récentes publications de l'entreprise montrent qu'elle travaille activement à développer ses propres technologies, ce qui pourrait à terme réduire sa dépendance vis-à-vis de partenaires externes. Reste à voir si cela suffira à rattraper son retard et à proposer des innovations marquantes. Ce qui est certain, c’est que l'intelligence artificielle est devenue un axe central du développement d'Apple, et les prochains mois pourraient nous réserver des surprises.