NVIDIA a annoncé aujourd’hui le Projet GR00T, un modèle de base polyvalent pour les robots humanoïdes, conçu pour stimuler les progrès dans le domaine de la robotique et de l’intelligence artificielle incarnée. Dans le cadre de cette initiative, la société a également présenté un nouvel ordinateur, le Jetson Thor, pour les robots humanoïdes basé sur le système sur puce (SoC) NVIDIA Thor, ainsi que des améliorations significatives de la plateforme robotique NVIDIA Isaac™, y compris des modèles de base d’IA générative et des outils pour la simulation et l’infrastructure des flux de travail d’IA.
« Mettre au point des modèles de base pour des robots humanoïdes généraux est l’un des défis les plus passionnants dans le domaine de l’IA aujourd’hui », a déclaré Jensen Huang, fondateur et PDG de NVIDIA. « Les technologies habilitantes se rassemblent pour permettre aux principaux experts en robotique du monde entier de faire des avancées considérables dans le domaine de la robotique artificielle générale ».
Les robots propulsés par GR00T, qui signifie Technologie Robot Généraliste 00, seront conçus pour comprendre le langage naturel et émuler les mouvements en observant les actions humaines, apprendre rapidement la coordination, la dextérité et d’autres compétences pour naviguer, adapter et interagir avec le monde réel. Lors de son discours d’ouverture au GTC, Huang a démontré plusieurs de ces robots réalisant une variété de tâches.
Le Jetson Thor a été créé en tant que nouvelle plateforme informatique capable d’effectuer des tâches complexes et d’interagir de manière sûre et naturelle avec les personnes et les machines. Il dispose d’une architecture modulaire optimisée pour la performance, la puissance et la taille. Le SoC inclut un GPU de nouvelle génération basé sur l’architecture NVIDIA Blackwell avec un moteur de transformations fournissant 800 teraflops de performance d’IA en virgule flottante de 8 bits pour exécuter des modèles d’IA générative multimodaux comme GR00T. Avec un processeur de sécurité fonctionnel intégré, un cluster CPU haute performance et une bande passante Ethernet de 100 GB, il simplifie considérablement les efforts de conception et d’intégration.
NVIDIA construit une plateforme d’IA complète pour les entreprises leaders en matière de robots humanoïdes telles que 1X Technologies, Agility Robotics, Apptronik, Boston Dynamics, Figure AI, Fourier Intelligence, Sanctuary AI, Unitree Robotics et XPENG Robotics, entre autres.
« Nous sommes à un point de bascule dans l’histoire, avec des robots centrés sur l’humain comme Digit sur le point de changer le travail pour toujours. L’IA moderne accélérera le développement, ouvrant la voie pour que des robots comme Digit aident les gens dans tous les aspects de la vie quotidienne », déclare Jonathan Hurst, cofondateur et directeur de la robotique chez Agility Robotics. « Nous sommes ravis de nous associer à NVIDIA pour investir dans l’informatique, les outils de simulation, les environnements d’apprentissage automatique et les autres infrastructures nécessaires pour réaliser le rêve de voir des robots faire partie de la vie quotidienne ».
« L’IA incarnée ne se contentera pas d’aborder certains des plus grands défis de l’humanité, mais elle créera également des innovations qui sont actuellement hors de notre portée ou de notre imagination », déclare Geordie Rose, cofondateur et PDG de Sanctuary AI. « Une technologie aussi importante ne devrait pas être construite en silos, c’est pourquoi nous privilégions les partenariats à long terme comme avec NVIDIA ».
Les outils Isaac utilisés par GR00T sont capables de créer de nouveaux modèles de base pour toute incarnations de robots dans n’importe quel environnement. Ces outils comprennent Isaac Lab pour l’apprentissage par renforcement et OSMO, un service d’orchestration des calculs.
Les modèles d’IA incarnés nécessitent d’énormes quantités de données réelles et synthétiques. Le nouvel Isaac Lab est une application légère, optimisée pour la performance et accélérée par le GPU, construite sur Isaac Sim spécifiquement pour exécuter des milliers de simulations parallèles pour l’apprentissage des robots.
Pour dimensionner les charges de travail de développement de robots dans des environnements de calcul hétérogènes, OSMO coordonne les flux de travail de génération de données, d’entraînement des modèles et de bouclage logiciel/matériel dans des environnements distribués.
NVIDIA a également annoncé Isaac Manipulator et Isaac Perceptor, une collection de modèles pré-entraînés, de bibliothèques et de matériel de référence pour la robotique.
Isaac Manipulator offre des capacités de dextérité et d’IA modulaires de pointe pour les bras robotiques, avec une collection solide de modèles de base et de bibliothèques accélérées par le GPU. Il fournit jusqu’à 80 fois plus de vitesse dans la planification des trajectoires et la perception en temps réel augmente l’efficacité et la performance, permettant aux développeurs d’automatiser un plus grand nombre de nouvelles tâches robotiques. Parmi les premiers partenaires de l’écosystème figurent Yaskawa, Universal Robots, une entreprise de Teradyne, PickNik Robotics, Solomon, READY Robotics et Franka Robotics.
Isaac Perceptor offre des capacités de vision 3D immersive avec plusieurs caméras, qui sont de plus en plus utilisées dans les robots mobiles autonomes adoptés dans les opérations de fabrication et de logistique pour améliorer l’efficacité et la sécurité des travailleurs, et pour réduire les taux d’erreurs et les coûts. Parmi les premiers utilisateurs se trouvent ArcBest, BYD et KION Group, qui visent à atteindre de nouveaux niveaux d’autonomie dans les opérations de manipulation de matériaux et plus encore.
Thunderbolt vs USB-C : Qu’est-ce que c’est, différences et comment les distinguer ?