Gemini Robotics 2 : révolution dans l'intelligence des robots

Une avancée majeure dans l'intelligence robotique

Depuis des décennies, l'idée de robots capables de s'intégrer harmonieusement dans notre quotidien a alimenté l'imaginaire collectif. Aujourd'hui, cette vision se rapproche de la réalité grâce à une avancée significative dans le domaine de l'intelligence artificielle appliquée à la robotique. La plupart des robots actuels sont limités par des programmations rigides, souvent conçus pour exécuter des tâches répétitives et spécifiques. Leur capacité à apprendre de manière autonome ou à s'adapter à des environnements changeants restait limitée. De plus, le transfert de compétences d'un robot à un autre s'avérait complexe. Pour relever les défis actuels, il est crucial de doter les robots de modèles d'IA capables de penser et d'agir intelligemment, tout en interagissant en toute sécurité avec leur environnement.

Gemini Robotics 2 : Une nouvelle ère pour la robotique

Gemini Robotics 2 représente une avancée majeure en matière de robotique adaptable. Ce système d'intelligence permet aux robots de contrôler l'ensemble de leur corps, d'améliorer leur dextérité et de collaborer efficacement entre eux. Cette innovation ouvre la voie à une nouvelle génération de robots capables de s'adapter à des tâches variées, comme marcher, s'accroupir, ou manipuler des objets pour nettoyer une pièce. Grâce à cette intelligence avancée, les robots peuvent désormais fonctionner de manière autonome sur l'appareil, s'adaptant rapidement à de nouveaux corps robotiques en seulement quelques heures. Cette flexibilité est rendue possible par trois modèles performants :

• Gemini Robotics 2 : Ce modèle de vision-langage-action (VLA) convertit les entrées visuelles et linguistiques en mouvements, permettant un contrôle moteur précis des robots humanoïdes et bi-articulés. Il offre également une manipulation habile des mains et des pinces, augmentant ainsi la capacité des robots à interagir avec leur environnement de manière plus sophistiquée.
• Gemini Robotics ER 2 : Ce modèle de raisonnement incarné (ER) permet aux robots de comprendre et de planifier des tâches complexes, tout en facilitant la communication avec les humains. Il introduit également la capacité des robots à travailler en équipe, ce qui est essentiel pour accomplir des tâches qui nécessitent une coordination et une collaboration entre plusieurs unités.
• Gemini Robotics On-Device 2 : Optimisé pour fonctionner localement, ce modèle s'adapte rapidement à de nouveaux corps robotiques, même avec des configurations radicalement différentes. Il est conçu pour fonctionner efficacement sans nécessiter de connexion réseau, ce qui est crucial pour les applications où la latence et la connectivité sont des préoccupations majeures.

Humanoïdes en mouvement : Une gestion complète des tâches

Le monde dans lequel nous vivons est conçu pour les mouvements humains, nécessitant des capacités d'atteinte, de flexion et d'équilibre. Les modèles précédents se concentraient sur le contrôle de la partie supérieure du corps des robots humanoïdes. Désormais, avec Gemini Robotics 2, l'IA s'étend à l'ensemble du corps, permettant une coordination complète. Prenons l'exemple du robot humanoïde Apollo 2 d'Apptronik. Grâce à Gemini Robotics 2, il peut recevoir des instructions complexes telles que « placer l'arrosoir dans la boîte verte sur l'étagère du bas ». Apollo est capable de traiter cette instruction, de se déplacer vers la table, de saisir l'arrosoir et de le placer précisément à l'endroit désigné. Bien que la vitesse de mouvement puisse encore être améliorée, cette capacité marque un progrès significatif vers l'accomplissement de tâches complexes nécessitant une coordination corporelle complète.

Vers une dextérité avancée

Pour être véritablement utiles dans les environnements domestiques et professionnels, les robots doivent posséder une grande finesse dans leurs mouvements. Gemini Robotics 2 permet d'atteindre un nouveau niveau de dextérité physique, que ce soit avec des mains ou des pinces. Le modèle peut contrôler la main SharpaWave à cinq doigts, dotée de 22 degrés de liberté, pour réaliser des actions délicates telles que faire des nœuds ou sceller un sac ziplock. Il peut également manipuler des pinces parallèles standard à deux doigts sur une plateforme Franka Duo pour effectuer des tâches complexes. L'objectif est d'atteindre une précision et une rapidité comparables à celles des humains.

Raisonnement agentique et collaboration entre robots

La plupart des tâches réelles nécessitent plusieurs étapes et une planification sur une période prolongée. Le modèle de raisonnement incarné, Gemini Robotics ER 2, agit comme le cerveau du robot, traitant les instructions, observant l'environnement et coordonnant les actions nécessaires. Cette mise à jour permet aux robots de gérer des séquences de tâches plus longues, impliquant des centaines de décisions. Gemini Robotics ER 2 comprend désormais quand les tâches commencent et se terminent, et peut identifier les événements clés, améliorant ainsi la compréhension des progrès. De plus, la collaboration entre robots est introduite, permettant à différents types de robots de travailler ensemble pour résoudre des flux de travail complexes qu'un seul robot ne pourrait accomplir seul.

Adaptation rapide et fonctionnement local

Dans de nombreuses applications, les robots doivent fonctionner sans dépendre d'une connexion réseau. Gemini Robotics On-Device 2 est conçu pour répondre à ces contraintes, en permettant un fonctionnement local efficace. Ce modèle est capable de s'adapter rapidement à de nouveaux corps robotiques, même avec des formes et des capteurs différents, en seulement quelques heures. Cela est rendu possible grâce aux techniques avancées de transfert de mouvement héritées de Gemini Robotics 1.5. Cette capacité à s'adapter rapidement est essentielle pour les environnements où la flexibilité et la rapidité d'adaptation sont cruciales.

Engagement pour une robotique sûre et responsable

La sécurité est un aspect fondamental de la recherche en robotique. À mesure que les robots gagnent en capacités, il est essentiel de garantir leur sécurité et leur alignement avec les normes de sécurité. Gemini Robotics 2 intègre ASIMOV-Agentic, une nouvelle référence pour la sécurité agentique. Elle évalue la capacité des robots à refuser des actions dangereuses et à demander une intervention humaine en cas d'incertitude. Avec un raisonnement incarné amélioré, Gemini Robotics ER 2 est le modèle le plus sûr à ce jour, capable de détecter la proximité humaine et de déclencher des mesures de sécurité appropriées. Cette approche multicouche de la sécurité est cruciale pour assurer que les robots peuvent interagir en toute sécurité avec les humains et leur environnement.

Vers une intelligence artificielle physique à usage général

Gemini Robotics 2 représente une étape clé vers la réalisation d'une intelligence artificielle générale (AGI) dans le monde physique. En dépassant l'automatisation de tâches uniques, cette avancée vise à développer une intelligence à usage général, capable de travailler aux côtés des humains pour relever des défis complexes. L'objectif est de créer une intelligence de base qui permettra aux robots de s'adapter à une variété de situations et de tâches, rendant leur intégration dans notre quotidien plus fluide et plus efficace.