Brief IA : Des modèles chinois trahissent un entraînement sur Blackwell

Des modèles chinois trahissent un entraînement sur Blackwell

Brief IA
Tom Levy·4 min

Plusieurs modèles d'IA chinois, dont ceux développés par DeepSeek, Moonshot AI, MiniMax et Ant Group, montrent des empreintes d'initialisation associées aux GPU Nvidia Blackwell, selon Will DePue. La société Lava a repéré 32 GPU B300 de cette génération en Chine, soulignant les limites des contrôles d'exportation américains sur les technologies d'IA avancées.

En bref
1Plusieurs modèles d’IA chinois présentent des empreintes d’initialisation liées à des GPU Nvidia Blackwell, selon Will DePue
2DeepSeek, Moonshot AI, MiniMax et Ant Group sont cités parmi les laboratoires concernés
332 GPU B300 de la génération Blackwell Ultra ont été repérés en Chine par la société Lava
4Plusieurs projets de loi américains visent à renforcer les contrôles d’exportation
Pourquoi c'est important : Ces éléments illustrent les limites des contrôles actuels sur les technologies d’IA avancées et la difficulté d’en restreindre l’accès à l’échelle internationale.

Des poids de modèles publiés par plusieurs laboratoires d’IA en Chine portent, selon Will DePue, des motifs d’initialisation propres aux GPU Nvidia Blackwell. Les indices techniques citent DeepSeek, Moonshot AI, MiniMax et Ant Group, tandis que des B300 ont été repérés en Chine par une société de sécurité. À Washington, plusieurs textes visent à restreindre davantage ces accès, malgré des limites reconnues dans l’attribution géographique.

La localisation des GPU reste indéterminée et des vérifications sont publiées

Relier un modèle à des GPU Blackwell ne permet pas de déterminer où ces puces sont physiquement installées, certains laboratoires chinois pouvant y accéder via des fournisseurs américains. Le Cloud Security Act vise à combler cette faille d’accès indirect. Des graines d’initialisation associant DeepSeek-V3 à Hopper et DeepSeek-V4-Flash à Blackwell permettent la reproduction des résultats. Will DePue précise que plusieurs chercheurs seniors, indépendants ou issus de laboratoires comme OpenAI et Anthropic, ont confirmé ses conclusions. Par ailleurs, OpenAI et Anthropic ont exprimé des inquiétudes concernant la copie de leurs modèles par distillation, une pratique également signalée par l’agence américaine CISA.

DeepSeek, Moonshot AI, MiniMax et Ant Group parmi les utilisateurs présumés

Will DePue affirme que DeepSeek, Moonshot AI, MiniMax et Ant Group ont utilisé des GPU Nvidia Blackwell pour entraîner leurs modèles. Il rapporte avoir identifié six modèles chinois initialisés sur des systèmes Blackwell, dont DeepSeek-V4-Pro, Kimi K3 et MiniMax-M3. Quatre de ces modèles correspondent à des composants Grace Blackwell, GB200 et GB300 dans les systèmes phares à refroidissement liquide de Nvidia. Selon DePue, c’est la première fois que MiniMax et Ant Group sont publiquement associés à l’utilisation de Blackwell. Plus largement, il soutient que des laboratoires chinois utilisent ces GPU malgré les restrictions d’exportation.

Le brief IA que lisent les pros

Vous suivez la course aux modèles IA ?

Chaque sortie (GPT, Claude, Gemini, Mistral…) décryptée le soir même, en 5 min. Gratuit.

Inclus dès l'inscription : notre sélection des meilleurs guides & comparatifs IA.

Choisissez votre rythme

Gratuit · Pas de spam · Désabonnement en 1 clic

Des B300 de la génération Blackwell Ultra repérés via des IP chinoises

La société de sécurité israélienne Lava a déclaré avoir identifié 32 GPU Nvidia B300 via des points de surveillance exposés publiquement. Ces unités appartiennent à la génération Blackwell Ultra et les adresses IP associées étaient géolocalisées en Chine. Selon Lava, ces GPU sont soumis aux contrôles d’exportation américains.

La méthode : une empreinte d’initialisation exploitée à grande échelle

Will DePue explique qu’une signature du GPU subsiste dans les poids après entraînement, car l’initialisation impose un motif dépendant de la puce et de la graine utilisée. Son analyse, publiée par Unemployment Labs, examine les poids rendus publics par des laboratoires chinois. Les poids sont initialisés à l’aide d’algorithmes pseudo-aléatoires comme Philox, qui génère les mêmes valeurs à partir d’une graine donnée. Avec PyTorch et la bibliothèque cuRAND de Nvidia, des threads GPU parallèles créent ces valeurs, rendant possible la comparaison entre un motif simulé et des poids publiés. DePue affirme avoir testé plus de six trillions de combinaisons de disposition de puce et de graine pour effectuer ce rapprochement. Il a fondé Unemployment Labs après avoir quitté OpenAI plus tôt cette année.

Pression politique aux États‑Unis et affaire Megaspeed

Aux États‑Unis, le président de la Chambre Mike Johnson soutient un renforcement des contrôles d’exportation alors qu’au moins quatre projets de loi sont en attente d’examen : AI Overwatch Act, Chip Security Act, Match Act et Cloud Security Act. Lundi, les sénateurs Jim Banks et Elizabeth Warren ont invoqué la relation attribuée à Jensen Huang avec une espionne présumée pour soutenir l’AI Overwatch Act, destiné à codifier des contrôles existants. Elizabeth Warren a précisé ne pas être certaine du statut d’Alice Huang, une accusation contestée par Pékin et faisant l’objet d’une enquête du FBI. Parallèlement, Jensen Huang a démissionné après des révélations sur une liaison avec Alice Huang, fondatrice en 2023 de Megaspeed International à Singapour, société visée par une enquête américaine pour soupçons d’exportations illicites de puces Nvidia vers la Chine.

Suivez Brief IA

L'actu IA du jour, aussi dans votre fil.

Commentaires