LLM : 13 000 tournures trahissent l’écriture des IA

Graphite a passé au crible l’écriture de plusieurs modèles de langage et recense des milliers de formulations nettement plus fréquentes que chez des auteurs humains. Opus 5.5 et Astra affichent chacun leurs tics, tandis que la chasse aux tirets cadratins progresse. Les laboratoires promettent des styles plus naturels, mais les marqueurs ne disparaissent pas.

Des indicateurs tenaces malgré des promesses de style plus naturel

Graphite observe que le nombre total d’indicateurs d’écriture reste globalement stable dans le temps. Greg Druck note que si les marqueurs les plus connus sont supprimés, d’autres apparaissent et chaque version de modèle développe ses propres spécificités. Il exprime des doutes sur la capacité des laboratoires à éliminer complètement ces constructions, évoquant la taille des modèles et le nombre limité de tests réalisables, ce qui laisse passer certains éléments. Cela contraste avec les annonces d’Anthropic, qui présente Opus 5.5 comme plus naturel et rapporte que des premiers utilisateurs ont trouvé son écriture plus claire et plus facile à suivre, ainsi qu’avec les déclarations d’OpenAI pour GPT-6 Sol et Luna promettant davantage de clarté, moins de jargon et moins de tournures étranges.

Un protocole comparatif sur 10 000 articles pré-ChatGPT

Un corpus de 10 000 articles publiés avant l’arrivée de ChatGPT a été utilisé pour constituer un groupe de contrôle humain. Les modèles d’IA ont été sollicités pour réécrire ces contenus à partir de résumés, afin de limiter le biais lié aux textes sources. Les chercheurs ont ensuite comparé la fréquence de mots, d’expressions et de schémas de construction de phrases. Graphite en tire une cartographie des préférences lexicales de chaque modèle, tout en soulignant le recours persistant à des oppositions marquées. Au total, 13 000 tournures apparaissent au moins deux fois plus souvent dans les textes générés par des LLM que dans les écrits humains.

Opus 5.5 privilégie « fiable » et répète « cela compte »

Dans les textes générés par Opus 5.5, le terme « fiable » apparaît 23 fois plus fréquemment que dans les échantillons humains. Si la structure « ce n’est pas X, c’est Y » est désormais évitée, le modèle utilise des variantes comme « c’est plus qu’un X, c’est un Y ». Deux tics dominent : « cela compte », 116 fois plus utilisé que par des humains, et la construction « pourquoi X compte », 92 fois plus fréquente. Greg Druck indique que les modèles Claude tendent à se rapprocher de la distribution des mots humains, alors que les modèles GPT s’en éloignent.

Astra mise sur le « cadrage correctif » et les précautions de langage

Astra d’OpenAI se distingue par l’emploi de l’expression « une autre dimension » et par des formulations atténuées comme « peut fournir » ou « peut offrir ». Son principal marqueur est un cadrage correctif, présentant un sujet comme « pas simplement X » ou comme une alternative « plutôt que de s’appuyer sur X », des tournures plus de 100 fois plus fréquentes que dans l’écriture humaine. Parallèlement, les laboratoires ont réagi à l’abus de tirets cadratins observé par le passé : Opus 5.5 les utilise 99 % moins qu’Opus 5, Astra 88 % moins que les textes humains, et Gemini 3.1 Pro les a presque totalement éliminés. Certains indicateurs précoces, dont ces tirets et l’usage du mot « plonger », ont ainsi disparu.