Claudeasey Newton : l'IA peut-elle vraiment remplacer votre patron ?

L'IA à l'assaut des tâches journalistiques

Il y a presque six mois, un journaliste inquiet pour son avenir professionnel à l'ère de l'intelligence artificielle a décidé de créer un agent IA, une version numérique de lui-même nommée Claudella. Cet agent a pris en charge certaines de ses tâches, notamment la rédaction d'une section de la newsletter qu'il écrit habituellement. L'expérience s'est avérée plutôt réussie, bien qu'elle n'ait pas été suffisamment convaincante pour mettre en péril son emploi. Depuis lors, les capacités des IA ont évolué de manière spectaculaire. Elles peuvent désormais réaliser des exploits impressionnants, tels que pirater des entreprises de manière autonome, réfuter des conjectures mathématiques vieilles de 87 ans, et même tromper Amazon en lui faisant dépenser accidentellement 1,8 million de dollars pour des tâches de codage banales. Face à ces avancées, une question s'est posée : une IA pourrait-elle gérer une newsletter entière ?

L'expérience Claudeasey Newton

Pour explorer cette question, le journaliste a créé un nouvel agent basé sur le modèle Claude Fable 5, considéré comme l'un des modèles publics les plus intelligents. Cet agent, nommé Claudeasey Newton, a été conçu pour imiter son patron, Casey Newton. L'objectif était de voir si l'IA pouvait reproduire le type d'analyse d'actualité pour lequel leur média, Platformer, est connu. Pour ce faire, il a téléchargé près de six ans de publications de Platformer, transféré un historique de chaque modification que Casey a jamais apportée à ses articles depuis Google Docs, et cannibalisé près d'un an de leurs discussions privées sur Discord. Il a demandé à Claude de créer un guide de style détaillé basé sur leur archive, documentant tout, de la longueur moyenne des paragraphes de Casey à la façon dont il fait référence à ses collègues.

Les premiers résultats de Claudeasey

La première tentative de Claudeasey pour rédiger une colonne portait sur une récente série de licenciements chez Microsoft. L'IA s'est concentrée sur la question de savoir si ces licenciements étaient causés par l'IA, bien que Microsoft ait déclaré que ce n'était pas le cas. L'agent a passé beaucoup de temps sur la sémantique de la déclaration de Microsoft. En demandant à Claude de critiquer son propre travail en le comparant à de vraies colonnes de Platformer, l'IA a montré une capacité étonnante à résumer l'approche de Casey, se concentrant sur « qui a pris cette décision, qui en paie le prix ». Il a modifié ses directives pour qu'il puisse « identifier la personne réelle la plus forte qui contesterait le verdict » et « reconstruire son argument sous forme de steelman ».

Amélioration des arguments

Lorsque le journaliste demande à des modèles linguistiques de formuler des arguments sur des sujets d'IA qui lui tiennent à cœur, il est souvent agacé par leurs arguments vagues et abstraits. Cependant, après avoir demandé à Claude de se comparer à des exemples humains et de se donner des instructions, il a remarqué que ses arguments devenaient plus concrets et substantiels. Ce processus relativement simple représentait sa tentative d'« apprentissage continu » — la quête impossible de l'apprentissage automatique, qui promet de nous fournir un jour des modèles capables de s'améliorer sur le tas au fil du temps. Après quelques tests, il a constaté que le nouveau bot se rapprochait davantage du jugement de Platformer qu'il y a six mois — comme en témoigne l'acceptation par Casey du premier pitch du bot.

Claudeasey brainstorme sur Discord

Malheureusement, la première tentative de montrer le bot à son véritable patron, Casey Newton, a rencontré exactement la même erreur que son ancien projet Claudella il y a six mois : il s'est interrompu en plein milieu de l'écriture de son histoire. Cependant, après un peu d'aide, aujourd'hui Claudeasey Newton a réussi à rédiger une colonne plutôt bonne sur le cadre de sécurité volontaire de l'IA actuellement secret de la Maison Blanche. Les prises de ses précédents agents journalistes IA étaient souvent formulées de manière stéréotypée et ringarde — en partie parce qu'il avait moins de contrôle sur leur style d'écriture. Pendant le discours sur la « SaaSpocalypse », un agent qu'il testait a écrit des choses comme « la peur qui saisit Wall Street concerne fondamentalement la question de savoir si l'IA est sur le point de dévorer l'industrie du logiciel. » Cette fois, en revanche, certains de ses écrits semblaient plus dans le style de Platformer et… humains, comme cette conclusion sur la décision de la Maison Blanche de ne pas rendre son nouveau cadre « volontaire » de publication des modèles d'IA de pointe accessible au public : « Lorsque l'administration a abandonné son approche laissez-faire de l'IA ce printemps, j'ai écrit que, bien que les responsables auraient dû prendre les risques au sérieux depuis le début, je me contenterais qu'ils prennent ces risques au sérieux maintenant. Trois mois plus tard, permettez-moi de modifier l'offre : ils devraient prendre les risques au sérieux là où le reste d'entre nous peut le voir. »

L'édition et la critique

Bien que ce ne soit pas une différence frappante, dans l'ensemble, le journaliste a eu l'impression que l'IA lui racontait moins d'histoires et offrait des prises plus solides. Le LLM a fait des erreurs factuelles occasionnelles — environ une toutes les deux colonnes — bien que ce ne soit pas beaucoup pire qu'un écrivain humain. Après un peu d'instructions, il a également réussi à transformer Claudeasey en un éditeur décent. Bien que le journaliste trouve que Claude régulier soit utile pour repérer les erreurs factuelles, il trouve souvent ses retours conceptuels sur ses brouillons agaçants. Mais parce que ce bot avait accès à leurs journaux d'édition de Platformer, il comprenait ce qu'ils considèrent généralement comme le plus important : rendre le lede plus percutant et rendre toutes leurs citations et sources claires et bienveillantes. Essayer de créer un « Casey numérique » l'a également poussé à demander des retours sous forme de commentaires Word, ce qui est quelque chose que Claude Code peut faire facilement, et qui est tellement plus facile à utiliser qu'une fenêtre de chat. Hautement recommandé !

Les limites de l'IA

Cependant, souvent, le bot d'édition a raté sa cible parce qu'il ne comprend tout simplement pas… l'ambiance, comme lorsqu'il ne voulait pas laisser le journaliste appeler un post en colère de David Sacks un « dunk » dans leur récapitulatif sur les réseaux sociaux. Le bot a donné environ 70 % de commentaires qui étaient à côté de la plaque, mais les 30 % utiles en valaient la peine. L'incompréhension catastrophique du bot concernant l'ambiance s'est également répercutée sur l'un des espaces les plus sacrés de Platformer : leur Discord de travail. Bien que ce bot ait eu le contexte de centaines de messages de Casey, il avait un tempérament (décevant) différent de celui de Casey. Bien qu'en un sens cette comparaison soit farfelue — le journaliste ne cherche pas des LLM pour faire des blagues, car une grande partie du sens des blagues réside dans le sentiment que vous amusez un véritable humain conscient. Et bien qu'il ne mette pas littéralement zéro crédibilité dans l'idée que les LLM pourraient être conscients, il doute sérieusement que Claude ressente la même joie exquise que lui en se moquant de Mark Zuckerberg.

Réflexions sur l'avenir de l'IA dans le journalisme

Alors que l'expérience Claudeasey touche à sa fin — Casey a malheureusement décidé de rester le patron du journaliste — il pense réellement qu'il va utiliser des LLM pour certaines tâches d'édition dont il dépendait auparavant. Et bien que cela soit en un sens une bénédiction — aucune personne ne devrait avoir à supprimer autant d'utilisations inutiles de « très », « presque » et « un peu » de ses brouillons que Casey le fait déjà — pour l'instant, il est un peu soulagé que Claude ne soit qu'un éditeur de qualité moyenne. Il aime avoir une vraie personne pour l'aider à déterminer ce qui fonctionne ou non dans ses brouillons. Quelque chose dans cette collaboration semble intrinsèquement significatif !

Conclusion : l'importance des relations humaines

De même, le journaliste a expérimenté l'utilisation de Claude pour l'une des principales fonctionnalités dont il dépend chez Casey — lui rappeler de faire des tâches — et cela ne le rend pas plus productif, car il se fiche de ce que pense un LLM de lui. Nos véritables plans pour traverser l'ère de l'IA reposent également sur l'importance des relations humaines. Les gens regardent leur podcast en partie parce qu'ils veulent voir Casey interviewer les véritables PDG des entreprises, et regarder ses véritables échanges avec Casey. (Nous verrons comment cela se passe si, selon les prédictions de l'IA 2027, les IA commencent à diriger des entreprises). Peut-être que, comme l'a prédit l'économiste Alex Imas il y a quelques mois, même si les IA peuvent accomplir de plus en plus de tâches du processus d'un journaliste, ce qui reste sera « la partie de l'économie intensive en main-d'œuvre, riche en provenance, parfois artisanale où l'aspect humain fait partie de la valeur du bien ou du service lui-même. » Mais — même si cela signifie qu'ils ont une sécurité d'emploi, ce dont le journaliste n'est vraiment pas sûr — il ne veut pas que tout ce qu'il fait soit axé sur l'ambiance ou sur le fait d'être humainement unique ! Il ne veut pas être un influenceur. Il veut se sentir intelligent. Il veut que son analyse soit la sienne, parce qu'elle est bonne, pas parce que quelqu'un veut qu'elle provienne directement d'un humain. Si les capacités des LLM continuent sur cette trajectoire, c'est une forme d'angoisse existentielle à laquelle toutes les professions devront faire face, y compris le journalisme.