Elon Musk admet l'usage des modèles OpenAI par xAI pour Grok

Elon Musk et la distillation de modèles d'IA

Elon Musk a récemment confirmé devant un tribunal fédéral en Californie que sa startup d'intelligence artificielle, xAI, a utilisé des modèles développés par OpenAI pour améliorer ses propres systèmes. Cette déclaration a été faite dans le cadre d'une affaire judiciaire portant sur la pratique de la distillation de modèles.

La distillation de modèles est une technique largement employée dans le secteur de l'IA. Elle consiste à utiliser un modèle plus grand et plus performant pour transférer ses connaissances à un modèle plus petit, souvent dans le but de le rendre plus efficace. Bien que cette méthode soit couramment utilisée par les entreprises pour optimiser leurs propres modèles, elle est également au centre de controverses lorsqu'elle est employée pour imiter les performances de modèles concurrents.

Les déclarations d'Elon Musk

Interrogé sur cette pratique, Musk a expliqué qu'elle implique l'utilisation d'un modèle d'IA pour en entraîner un autre. Lorsqu'on lui a demandé si xAI avait spécifiquement distillé la technologie d'OpenAI, il a répondu de manière évasive, affirmant que "généralement toutes les entreprises d'IA" utilisent cette méthode. Pressé pour plus de précisions, il a finalement admis que xAI l'avait fait "partiellement".

Musk a également ajouté qu'il est courant d'utiliser d'autres IA pour valider ses propres systèmes d'IA, soulignant ainsi la normalité de cette pratique dans l'industrie.

Controverses et accusations

La distillation de modèles a suscité des débats croissants, notamment en raison des zones grises légales qu'elle implique. Des entreprises telles qu'OpenAI et Anthropic ont exprimé leurs préoccupations concernant l'utilisation de cette méthode par des concurrents, notamment des entreprises chinoises. OpenAI a publiquement accusé DeepSeek, tandis qu'Anthropic a mentionné DeepSeek, Moonshot, et MiniMax comme étant des acteurs utilisant potentiellement cette technique de manière inappropriée.

Google a également pris des mesures pour prévenir ce qu'il qualifie d'"attaques de distillation", qu'il considère comme une violation de ses conditions de service et une forme de vol de propriété intellectuelle.

Dans un article de blog, Anthropic a reconnu que bien que la distillation soit une méthode légitime pour créer des versions plus petites et moins coûteuses de leurs modèles pour les clients, elle peut aussi être détournée à des fins illicites. Les concurrents peuvent ainsi acquérir des capacités avancées d'autres laboratoires à moindre coût et en un temps réduit par rapport à un développement indépendant.