Tu veux les meilleurs outils IA avant les autres ?
On teste et on décrypte les nouveaux outils IA chaque soir, en 5 min. Gratuit.
Inclus dès l'inscription : notre sélection des meilleurs guides & comparatifs IA.
Choisis ton rythme
Gratuit · Pas de spam · Désabonnement en 1 clic
Nvidia a profité de l'événement GTC Taipei pour annoncer des avancées majeures dans le domaine de l'intelligence artificielle physique. Le géant technologique a introduit plusieurs modèles destinés à transformer les capacités des robots, des véhicules autonomes et des systèmes vidéo.
Parmi les nouveautés, le modèle mondial Cosmos 3 se distingue. Il s'agit d'une mise à jour de l'omnimodel de Nvidia, capable de traiter simultanément le texte, les images, la vidéo, l'audio ambiant et les données d'action. Ce modèle est conçu pour générer des données d'entraînement synthétiques, interpréter des scènes complexes et prédire des états futurs sans nécessiter de recréation physique de ces situations. Les applications incluent la détection d'anomalies de circulation dans les villes intelligentes, comme le fait déjà le partenaire Linker Vision, et la génération de séquences vidéo photoréalistes de situations rares. Cosmos 3 produit également des données de mouvement numériques pour l'apprentissage robotique, comme démontré par le partenaire industriel Agile Robots.
Cosmos 3 utilise une architecture de mélange de transformateurs, combinant un transformateur de raisonnement et un transformateur de génération. Les variantes disponibles incluent Cosmos 3 Super pour une qualité optimale, Nano pour une inférence rapide, et un modèle Edge pour les systèmes embarqués en temps réel. Ces modèles sont accessibles sous la licence OpenMDW-1.1 sur Hugging Face et GitHub.
En parallèle, Nvidia a présenté Alpamayo 2 Super, un modèle destiné à la conduite autonome de niveau 4. Avec ses 32 milliards de paramètres, il améliore la compréhension spatiale et la gestion des situations rares. Alpamayo 2 Super introduit des actions-méta comme "changement de voie" ou "arrêt", et fournit une chaîne de causalité pour chaque décision, facilitant la documentation de sécurité et l'examen réglementaire. Le modèle est conçu pour être un enseignant, permettant aux fabricants de distiller des modèles plus petits pour une utilisation sur la puce Drive AGX Thor. Nvidia publie également AlpaGym, un cadre open-source pour l'apprentissage par renforcement en boucle fermée en simulation, et OmniDreams, un modèle génératif pour des scénarios de circulation rares.
Enfin, Nvidia a dévoilé le Isaac GR00T Reference Humanoid Robot, une plateforme de référence pour la recherche en robotique humanoïde. Ce robot, d'environ deux mètres de haut, utilise des mains tactiles à cinq doigts de Sharpa et est alimenté par le Jetson AGX Thor T5000. Il dispose de 75 degrés de liberté et utilise la pile Isaac GR00T, qui couvre la téléopération, la simulation dans Isaac Sim, les modèles fondamentaux et le middleware ROS. Bien que Nvidia ne vende pas le robot, Unitree prévoit de proposer le matériel d'ici fin 2026, avec des collaborations académiques en cours avec des institutions prestigieuses telles que Stanford Robotics Center et UC San Diego ARC Lab.
