Mesurer l'adoption de l'IA sans confondre activité et valeur : les connexions à un assistant IA ne suffisent pas à mesurer sa valeur. Qualité du travail, temps de vérification et réutilisation par les collègues offrent des repères plus utiles.

Les connexions à un assistant IA ne suffisent pas à mesurer sa valeur. Qualité du travail, temps de vérification et réutilisation par les collègues offrent des repères plus utiles.

Un collaborateur s'est connecté à un assistant dix fois dans la semaine. A-t-il gagné du temps, amélioré un livrable ou simplement recommencé une tâche qui ne fonctionnait pas ? Le compteur ne permet pas de trancher. Il décrit une activité, utile pour savoir si un outil est accessible et essayé. Lui faire porter une promesse de valeur crée une confusion au moment d'arbitrer les budgets et l'accompagnement.

La difficulté commence souvent avec la définition du succès. Un déploiement est présenté en nombre de licences, puis évalué en nombre d'utilisateurs actifs. Ces deux indicateurs parlent d'accès et de fréquentation. Pour savoir ce qui change dans le travail, il faut descendre au niveau d'une tâche et du résultat attendu.

Définir le résultat avant de compter les usages

Prenons une situation fictive : une équipe doit produire la synthèse d'un dossier client. Le résultat utile n'est pas un texte généré. C'est une synthèse suffisamment exacte, complète et exploitable pour préparer une décision. L'équipe peut définir quelques critères observables : les informations importantes sont présentes, les sources sont retrouvables, les incertitudes sont signalées et aucune hypothèse n'est présentée comme un fait.

Ces critères doivent exister avant le test. Sinon, le lecteur risque de confondre qualité rédactionnelle et qualité du travail. Un document fluide peut sembler convaincant alors qu'il déforme une date ou oublie une exception. Comparer plusieurs livrables sur une grille identique donne une base plus solide qu'une impression recueillie juste après la démonstration.

Compter le temps de vérification et de reprise

L'évaluation doit suivre toute la tâche : préparation des informations, interaction avec l'outil, relecture, corrections et validation. Un gain sur la première rédaction peut être absorbé par les étapes suivantes. À l'inverse, une tâche légèrement plus longue peut devenir préférable si elle produit un résultat nettement plus fiable. L'arbitrage dépend du besoin métier, pas d'une règle universelle.

Pour commencer, quelques tâches comparables peuvent être réalisées avec et sans assistance, en conservant leurs différences de complexité dans l'analyse. Il faut annoncer ce que l'on mesure, la période et le périmètre. Un petit essai aide à décider de la suite ; il ne permet pas d'annoncer un retour sur investissement valable pour toute l'entreprise.

Observer la réutilisation par d'autres personnes

Une pratique maîtrisée par son créateur ne constitue pas encore une capacité d'équipe. Un deuxième indicateur utile est sa reprise par un collègue : peut-il obtenir un résultat acceptable à partir de la documentation disponible ? De quelle aide a-t-il besoin ? Quelles erreurs reviennent ? Ces questions rendent visibles les besoins de transmission et de formation.

Le nombre de ressources ajoutées dans une bibliothèque ne suffit donc pas non plus. Une ressource consultée puis abandonnée n'a pas le même intérêt qu'une méthode réutilisée sur une tâche réelle. Un suivi léger peut distinguer découverte, essai, utilisation aboutie et demande de correction. Il doit rester suffisamment simple pour que l'équipe accepte de le renseigner.

Évaluer aussi le coût d'entretien

Une pratique IA a besoin d'être maintenue. Son propriétaire doit vérifier qu'elle reste compatible avec les outils autorisés, les documents disponibles et les règles internes. Ce temps fait partie du coût, au même titre que l'abonnement et l'accompagnement. Il explique pourquoi une entreprise gagne parfois à entretenir peu de ressources bien utilisées plutôt qu'un catalogue très vaste.

L'évaluation peut conduire à trois décisions : élargir l'usage, le retravailler ou l'arrêter. Un usage abandonné après un test sérieux n'est pas nécessairement un échec du programme. C'est aussi une dépense évitée et une information utile pour les équipes qui auraient rencontré le même problème.

Garder une mesure au service des équipes

Le suivi doit enfin être compris par ceux qui l'alimentent. S'il sert à classer les personnes selon leur nombre de requêtes, il encourage une activité facile à montrer. S'il sert à identifier les tâches utiles, les difficultés et les besoins d'aide, il peut soutenir l'apprentissage. Les indicateurs doivent être expliqués, proportionnés au besoin et partagés avec les interlocuteurs concernés dans l'entreprise.

Un tableau de bord raisonnable peut ainsi réunir trois dimensions : la qualité des tâches réalisées, la capacité d'autres personnes à reprendre la méthode et son coût complet. Les connexions restent un indicateur de contexte. La décision, elle, repose sur ce que l'équipe arrive effectivement à faire et à transmettre.

Quentin Bragard, CTO et cofondateur de Jaydai.