NVIDIA GR00T 2 apprend aux robots la manipulation grâce aux vidéos humaines

NVIDIA GR00T 2 a été présenté ce lundi 9 novembre 2026 lors de la Conference on Robot Learning (CoRL), à Austin, au Texas. Ce modèle ouvert d’action pour robots apprend des gestes de manipulation à partir de vidéos de personnes et marque la nouvelle génération du projet GR00T, destiné aux robots humanoïdes et polyvalents.

Selon NVIDIA, NVIDIA GR00T 2 est un world action model — un modèle qui observe l’environnement, anticipe les effets de ses propres actions et exécute des tâches complexes en plusieurs étapes — construit sur NVIDIA Cosmos. Un seul modèle pré-entraîné couvre des bras à pinces parallèles, des mains habiles et un humanoïde, et il transfère des compétences apprises à partir de démonstrations humaines entre différents corps de robots, sans démonstration propre à chaque robot.

Ce que montrent les tests de NVIDIA

Dans les tests contrôlés divulgués par l’entreprise, le modèle a accompli 40 des 50 tâches évaluées au moins une fois sans aucune démonstration propre à la tâche. Avec une seule démonstration par tâche, le taux moyen de réussite était de 71 % ; avec cinq démonstrations, il est monté à 95 %. NVIDIA affirme aussi que GR00T 2 figure parmi les trois meilleurs modèles dans toutes les catégories de modèles vision-langage-action et d’action du monde des benchmarks RoboCasa365, RoboLab, RoboDojo et MolmoSpaces.

Ces chiffres doivent être lus avec prudence : ce sont des résultats de tests contrôlés du fabricant lui-même. L’article technique de NVIDIA précise que les tâches du test à cinq démonstrations ont été sélectionnées parmi celles que le modèle peut apprendre avec cinq épisodes et un taux de réussite d’au moins 80 % — autrement dit, la moyenne de 95 % est élevée en partie par construction. Rien de tout cela ne garantit les mêmes performances hors du laboratoire.

Entraînement sur vidéo humaine et données ouvertes

Le pré-entraînement a combiné 402 730 heures de vidéo humaine à la première personne, 10 184 heures de démonstrations avec pince manuelle sur 2 897 tâches et 23 500 heures de téléopération de robots. NVIDIA publie 100 000 heures de ce matériau humain à la première personne — l’ensemble Human-1M-100K, avec vidéo, annotations en langage et données de mouvement de la tête et des mains — sous licence CC BY 4.0.

L’entreprise présente GR00T 2 comme un modèle ouvert. Selon la page de recherche du projet, le code doit être publié en décembre — l’ouverture a été annoncée, mais l’accès au code est encore à venir.

Qui le teste déjà

Foxconn applique NVIDIA GR00T 2 à l’automatisation d’usines pour la fabrication de serveurs, et Siemens évalue le modèle pour des cas d’usage industriels. Nexuni le teste pour la manipulation du linge en blanchisserie, et MicroAGI utilise GR00T 2, post-entraîné par apprentissage par renforcement, pour brancher des câbles Ethernet avec un bras robotique YAM. Aucune des entreprises n’a annoncé de déploiement en production : les travaux divulgués relèvent du test et de l’évaluation.

L’écosystème autour du modèle

Avec NVIDIA GR00T 2, NVIDIA a présenté Isaac Lab 3.0, un framework open source pour entraîner des robots en simulation, disponible depuis le 20 octobre 2026, et l’aperçu développeur d’Isaac Lab-Arena 0.4, pour l’évaluation à grande échelle. Deux nouveaux benchmarks ouverts ont aussi débuté : DexBench, avec 15 tâches dans le commerce de détail, la logistique, la fabrication et l’hôtellerie, et VABAR, de UC Berkeley avec NVIDIA, avec six tâches industrielles. Le modèle ouvert EgoHand, qui reconstruit le mouvement 3D des mains, dépasse déjà 40 000 téléchargements sur Hugging Face en deux semaines.

Contexte

Le projet GR00T a été dévoilé par le PDG Jensen Huang lors de GTC 2024. En mars 2025, NVIDIA a lancé GR00T N1, un modèle ouvert de 2 milliards de paramètres, suivi des versions N1.5 et N1.6. NVIDIA GR00T 2 est la nouvelle génération de cette famille.

À CoRL, le codirecteur du projet GR00T, Jim Fan, donne ce lundi la keynote « From Dreaming to Doing: World Action Models and Agentic Robotics ». Avant l’événement, Fan a affirmé que la vidéo de démonstration montre de vrais robots humanoïdes fonctionnant de manière autonome, à vitesse normale et sans téléopération — une déclaration de sa part, rapportée par Crypto Briefing.

Lire aussi : MorphMimic: uma única IA aprende a controlar três robôs humanoides différents.

Sources : NVIDIA Blog — Practice Makes Precise: At CoRL, NVIDIA and Partners Reveal How Robots Rehearse Delicate Work in Simulation; Unite.AI — NVIDIA Introduces GR00T 2 for Robots Learning From Human Video; Crypto Briefing — Nvidia unveils GR00T 2 and Isaac Lab 3.0 at CoRL conference; TipRanks — Nvidia Reveals New Robot AI with 95% Success Rate in Tests.

Crédit image : Ambi Robotics, via le blog officiel de NVIDIA. L’image illustre un système d’automatisation industrielle présenté dans la même annonce de CoRL 2026.

Transparence : cet article a été produit avec l’aide de l’intelligence artificielle, en croisant des publications publiques sur X et des sources d’internet. Nous recommandons de consulter les sources originales pour plus de détails.

Muse