Brief IA : IA en entreprise : la vérification a aussi un coût

IA en entreprise : la vérification a aussi un coût

Brief IA
Tom Levy·3 min

À Berkeley, des chercheuses ont suivi pendant huit mois une entreprise technologique de 200 salariés. Dans une expérience avec GPT-4, des consultants ont perdu 19 points sur un problème dépassant les capacités du modèle. SocIAty commence ses missions par un audit des activités réelles.

En bref
1À Berkeley, des chercheuses ont suivi pendant huit mois une entreprise technologique de 200 salariés.
2Dans une expérience avec GPT-4, des consultants ont perdu 19 points sur un problème dépassant les capacités du modèle.
3SocIAty commence ses missions par un audit des activités réelles.
Pourquoi c'est important : l'évaluation proposée inclut le temps de contrôle, et pas uniquement celui de la génération.

À Berkeley, des chercheuses ont observé une extension des tâches dans une entreprise technologique utilisant l'IA. Les résultats d'une expérience auprès de consultants du BCG montrent, eux, que l'assistance peut dégrader certaines réponses. Chez Ceetadel comme chez SocIAty, l'examen du travail précède la conception des agents.

Berkeley observe un travail qui empiète sur les pauses

En 2026, des chercheuses de Berkeley ont étudié durant huit mois une société technologique comptant 200 salariés. Elles ont constaté que les tâches s'élargissaient et que l'activité professionnelle débordait sur les pauses, souvent à l'initiative des salariés. Maggie Ye, responsable de cette recherche, décrit le passage d'un effort supplémentaire à une performance désormais attendue.

Du côté de SocIAty, l'accompagnement des entreprises s'appuie sur un constat : générer dix scénarios ne demande que peu d'effort, mais leur examen prend du temps. Selon l'intervenant, la charge se déplace ainsi vers la vérification, sans apparaître dans les indicateurs habituels. Il recommande que les managers rendent ce travail visible et puissent refuser certaines sollicitations, y compris venant de leur hiérarchie.

GPT-4 n'améliore pas toutes les tâches des consultants

En 2023, une expérience menée par des chercheurs de Harvard, du MIT et de Wharton a mobilisé 758 consultants du BCG avec GPT-4. Les chercheurs ont observé un gain net sur les tâches créatives. En revanche, sur un problème d'analyse hors du périmètre du modèle, les consultants assistés ont obtenu un score inférieur de 19 points à celui des autres, ayant accordé leur confiance à une réponse erronée.

L'intervenant de SocIAty souligne que les modèles ont évolué depuis, mais que leurs limites subsistent. Il recommande de définir précisément les tâches confiées à l'outil et les critères d'acceptation du résultat. Pour une recommandation commerciale, il s'agit de vérifier les hypothèses de marge plutôt que la présentation, et de reprendre un premier jet livré en dix secondes si nécessaire.

Le brief IA que lisent les pros

L’IA qui transforme le business ?

Stratégies, mouvements et levées IA décryptés, chaque soir en 5 min. Gratuit.

Inclus dès l'inscription : notre sélection des meilleurs guides & comparatifs IA.

Choisissez votre rythme

Gratuit · Pas de spam · Désabonnement en 1 clic

La démarche inclut aussi l'évaluation de la compréhension par le salarié et sa capacité à défendre une recommandation. Elle encourage le partage des erreurs pour en faire des cas de test ou des règles, et valorise les objections qui révèlent une limite concrète. L'entretien des compétences relève des équipes, tandis que l'entreprise doit permettre l'exercice du sens critique.

Ceetadel analyse les agences avant de concevoir les agents

Chez Ceetadel, plusieurs semaines ont été consacrées à comprendre l'activité réelle de chaque agence avant toute conception d'agent. Les architectures sont ensuite soumises aux équipes pour être discutées et éventuellement contestées, plutôt que simplement validées. Le principe affiché est de choisir les outils à partir du travail observé.

SocIAty a accompagné le déploiement de plusieurs centaines d'agents et commence chaque mission par un audit du travail effectivement réalisé. Selon l'intervenant, le principal obstacle n'est presque jamais technique, mais tient à la décision de ce qui doit être délégué, contrôlé ou abandonné. Il propose d'évaluer le déploiement de l'IA en identifiant les activités que l'entreprise a pu arrêter grâce à elle.

Le MIT estime les effets financiers encore limités

D'après le MIT, à l'été 2025, 95 % des expérimentations en IA générative n'avaient pas produit d'impact mesurable sur le compte de résultat. Selon l'intervenant de SocIAty, ce pourcentage peut être contesté, mais il constate que le manque de temps pour se former à l'IA revient souvent comme argument, tant du côté des équipes que des responsables ayant initié ces projets.

Les changements recommandés portent sur les méthodes de travail, les priorités et l'organisation des contrôles, plutôt que sur la seule installation de logiciels. Ils incluent le temps d'apprentissage, les essais infructueux, la possibilité de revoir les objectifs ou de supprimer des réunions. Pour mesurer le bénéfice, la durée prise en compte doit aller jusqu'à un résultat que quelqu'un accepte de signer, contrôle compris.

Suivez Brief IA

L'actu IA du jour, aussi dans votre fil.

Commentaires