Anthropic : 26,8 % en moyenne, mais 0 sur 90 pour une cible

La campagne autonome de conception de protéines de Claude affiche 26,8 % de liaisons validées, au-dessus des 10 à 15 % de l'industrie. Mais les performances varient fortement selon les cibles, avec un objectif où aucune des 90 conceptions n'a lié. Des estimations issues des comptes publiés suggèrent qu'une nouvelle cible pourrait souvent se situer bien en dessous de 26,8 %.

Des performances très dispersées selon les cibles

Les résultats publiés par cible vont de 72 liaisons sur 90 pour TREM2 à 0 sur 90 pour la protéine de liaison au maltose. Pour cette dernière, 90 conceptions ont été synthétisées, exprimées et mesurées sans obtenir une seule liaison. Ces écarts montrent que le taux global de 26,8 % est la moyenne de performances très différentes selon les cibles, et ne peut pas être appliqué à chaque cas particulier. Selon un rapport d'Anthropic, les scores de confiance in silico n'ont pas permis d'anticiper ces échecs, MBP et BBF-14 ayant reçu des scores similaires à ceux des cibles qui ont réussi. Pris ensemble, ces éléments indiquent qu'une nouvelle cible pourrait avoir une expérience bien plus variable et souvent moins favorable que ne le suggère le taux moyen.

Ce que la campagne a effectivement obtenu et validé

Anthropic a publié le 25 août 2026 les résultats d'une campagne autonome de conception de protéines. La campagne, dont un bilan a été diffusé le 18 août 2026, rapporte 354 liaisons sur 1 320 conceptions, soit 26,8 %, à comparer à une norme industrielle de 10 à 15 %. Deux laboratoires sous contrat distincts ont procédé à une validation indépendante de ces résultats. Les principaux chiffres, dont le 0 sur 90 et le taux de 26,8 %, sont issus de la même campagne, utilisant le même prompt et le même modèle. Une douzaine d’outils open source dédiés à la conception de protéines ont été coordonnés par l’agent autonome, qui a obtenu de meilleurs taux de réussite que les experts humains sur la majorité des cibles. Néanmoins, le taux de 26,8 % correspond à une mesure globale, alors que les applications concrètes portent en général sur une cible unique.

Ce que montrent les estimations issues des comptes publiés

Le taux de 26,8 % correspond à une moyenne sur seize cibles, et non à la probabilité de réussite pour une cible donnée. Un test binomial appliqué aux résultats par cible rejette l'idée d'un taux partagé unique avec une p-valeur d'environ 1,8 × 10⁻⁶³. En tenant compte des différences entre cibles, l'estimation indique qu'une nouvelle cible a environ 38 % de chances d'être sous le seuil de 10 % observé dans l'industrie. Si l'on supposait un taux unique de 26,8 %, obtenir 0 succès sur 90 pour la protéine de liaison au maltose aurait une probabilité de 6,3 × 10⁻¹³, soit environ une chance sur 1,6 trillion. Un ajustement bêta-binomiale aux huit comptes disponibles place l'intervalle prédictif à 90 % entre 0,1 % et 84,7 %, avec une médiane de 18,6 %. Sur cette base, un lot de 30 conceptions face à une cible non vue a 20,1 % de chances de ne produire aucune liaison, contre 0,0086 % si l'on supposait un taux partagé, soit un facteur d'environ 2 300.