Principaux renseignements
- NVIDIA Isaac GR00T N1 est le premier modèle de base open-source au monde dédié au raisonnement humanoïde général et à l’acquisition de compétences.
- Les développeurs peuvent utiliser GR00T N1 pour affiner ses capacités en le post-entraînant avec des données réelles ou synthétiques spécifiques à leur robot ou à leur application.
- Le modèle fonctionne sur une architecture à double système reflétant la cognition humaine, gérant les actions instinctives rapides et la prise de décision analytique délibérée.
NVIDIA a dévoilé un ensemble de technologies visant à accélérer de façon significative le développement des robots humanoïdes. La pierre angulaire de cette initiative est le NVIDIA Isaac GR00T N1 – le premier modèle de base open-source au monde destiné au raisonnement humanoïde général et à l’acquisition de compétences.
Amélioration du développement des robots
Dans le prolongement du GR00T N1, NVIDIA propose plusieurs cadres et modèles de simulation. Il s’agit par exemple du blueprint NVIDIA Isaac GR00T, destiné à la génération de données synthétiques, et de Newton, un moteur physique open-source développé en collaboration avec Google DeepMind et Disney Research. Conçu spécifiquement pour le développement de robots, Newton s’intègre à des plateformes de simulation populaires telles que MuJoCo de Google DeepMind et NVIDIA Isaac™.
Ensembles de données synthétiques dans la formation des robots
Le GR00T N1 repose sur une architecture composée de deux systèmes inspirés de la cognition humaine. Le « système 1 » permet des réactions rapides et instinctives, semblables à des réflexes, tandis que le « système 2 » est responsable des décisions réfléchies et analytiques. Ce second système traite les données environnementales et les instructions pour planifier soigneusement les actions, qui sont ensuite traduites en mouvements précis du robot par le « Système 1 ». L’entraînement des deux systèmes associe des données issues de démonstrations humaines réelles à de vastes ensembles de données synthétiques générées via la plateforme NVIDIA Omniverse™.
Applications
Le GR00T N1 peut s’adapter à un large éventail de tâches, notamment la saisie, la manipulation d’objets avec un bras ou les deux et le déplacement d’objets entre les membres. Ces capacités trouvent des applications dans divers secteurs en pénurie de main-d’œuvre, tels que la manutention, l’emballage et l’inspection. Les développeurs peuvent affiner le GR00T N1 en le dotant de données réelles ou synthétiques spécifiques à leur robot ou à leur application.
Partenariats
Lors de la keynote de la GTC, NVIDIA a démontré ce que GR00T N1 peut faire en pratique : un robot humanoïde de 1X Technologies a effectué des tâches ménagères de façon autonome, avec un modèle entraîné – basé sur GR00T N1 – permettant au robot de fonctionner de façon autonome. Cette démonstration met en évidence l’impact transformateur du GR00T N1 sur la capacité des robots à apprendre et à s’adapter à des environnements complexes et réalistes. En outre, des développeurs de premier plan comme Agility Robotics, Boston Dynamics, Mentee Robotics et NEURA Robotics tirent parti des capacités du GR00T N1. Dans le cadre d’une initiative parallèle, NVIDIA, Google DeepMind et Disney Research collaborent sur Newton, qui vise à donner aux robots une précision accrue lors de l’exécution de tâches complexes.
Création de vastes ensembles de données synthétiques
En outre, NVIDIA et Disney Research s’associent à Intrinsic pour établir les meilleures pratiques en matière de flux de données robotiques par le biais des pipelines OpenUSD. Cette collaboration contribue au développement d’outils et de méthodologies open-source au sein de la communauté robotique. En plus de ces collaborations, NVIDIA a lancé le Blueprint NVIDIA Isaac GR00T, un outil pour générer des mouvements de manipulation synthétiques. Cet outil utilise la plate-forme Omniverse et les modèles de base du monde Cosmos Transfer pour créer efficacement de vastes ensembles de données de mouvements synthétiques basés sur des démonstrations humaines limitées.
Engagement en faveur de l’Open-Source
NVIDIA encourage un écosystème robotique ouvert et collaboratif en publiant le jeu de données GR00T N1 dans le cadre d’un jeu de données d’IA physique open-source complet, disponible sur Hugging Face. De plus, au cours de la GTC, NVIDIA a présenté le supercalculateur personnel d’IA DGX Spark, une plate-forme puissante qui permet aux développeurs d’étendre les capacités du GR00T N1 à de nouveaux robots, tâches et environnements, sans avoir besoin d’une programmation personnalisée approfondie.
Si vous souhaitez accéder à tous les articles, abonnez-vous ici!
