Nvidia Corp. a dévoilé Cosmos 3 Edge, un modèle mondial compact conçu pour exécuter le raisonnement visuel et le contrôle des robots directement sur les appareils de pointe, parallèlement à une vague de partenariats qui enfoncent sa plate-forme d'intelligence artificielle physique plus profondément dans la base robotique et manufacturière du Japon.
Le modèle peut gérer 4 milliards de paramètres et est construit sur la famille Nemotron de Nvidia. Il propose un raisonnement visuel sur l'appareil et génère des politiques robotiques, et les développeurs peuvent l'adapter à des robots, véhicules et capteurs spécifiques en une journée environ. Cosmos 3 Edge fonctionne sur des puces graphiques de pointe et sur la plate-forme Jetson de Nvidia, y compris les modules T2000 et T3000 récemment annoncés, ainsi que sur des GPU RTX et des systèmes DGX.
Cette version étend Cosmos, la plate-forme de modèle de base mondiale de Nvidia pour l'IA physique, que la société utilise pour générer et évaluer des données de formation pour les robots et les machines autonomes. Nvidia a présenté en juin la génération plus large de modèles mondiaux omnimodaux Cosmos 3.
Nvidia a également déployé de nouvelles bibliothèques Metropolis qui, selon elle, permettent aux développeurs de créer et d'exploiter des systèmes d'intelligence vidéo basés sur Cosmos au moins six fois plus rapidement, en utilisant des agents de codage pour la formation et le déploiement.
La plupart des nouvelles étaient destinées au Japon, où plus de 20 entreprises ont annoncé leur intention de rejoindre la Nvidia Cosmos Coalition. La liste s'étend de noms de robotique industrielle tels que FANUC Corp., Yaskawa Electric Corp. et Kawasaki Heavy Industries Ltd. à Fujitsu Ltd., Hitachi Ltd., NEC Corp., SoftBank Corp., Sony Group Corp., Honda R&D Co. Ltd. et Preferred Networks Inc., soutenu par Toyota.
Fujitsu construit déjà une plateforme de contrôle collaborative avec FANUC, Yaskawa Electric et Kawasaki Heavy Industries. SoftBank construit une plateforme de développement d'IA physique sur Cosmos, Omniverse et Isaac Sim. Groove X Inc. utilise Jetson pour alimenter ses robots compagnons LOVOT, tandis qu'Enactic Inc. peaufine le modèle Isaac GR00T de Nvidia pour les robots de soins aux personnes âgées et Telexistence Inc. applique les outils à l'automatisation de la vente au détail.
« La prochaine frontière de l'IA se situe dans le monde physique et il s'agit d'une opportunité unique pour le Japon », a déclaré le fondateur et directeur général de Nvidia, Jensen Huang, qui est au Japon cette semaine pour une série d'annonces.
Nvidia et le gouvernement japonais ont dévoilé séparément ce qu'ils présentent comme la première infrastructure nationale d'IA au monde. Noetra Corp. construira une usine d'IA alimentée par 27 500 GPU Nvidia Rubin et 13 750 processeurs Vera, consommant 140 mégawatts, avec le soutien du ministère japonais de l'Économie, du Commerce et de l'Industrie. Le projet, appelé FRONTia, développera des modèles de base multimodaux ouverts pour la robotique, les jumeaux numériques et la fabrication intelligente.
Le gouvernement consacre environ 2,4 milliards de dollars à cet effort, selon CNBC. Le Japon vise à conquérir plus de 30 % du marché mondial de la robotique IA d’ici 2040, une opportunité que Nvidia et ses partenaires évaluent à 133 milliards de dollars.
Huang a présenté cette construction comme une opportunité pour le Japon de récupérer son avantage manufacturier, affirmant que le pays qui a inventé la fabrication moderne construit actuellement les usines d'IA pour la prochaine révolution industrielle.
Cette initiative s'appuie sur l'activité souveraine croissante d'IA de Nvidia, dans laquelle les gouvernements financent la capacité informatique nationale plutôt que de compter sur des fournisseurs de cloud étrangers. Cela souligne également à quel point l'IA physique centrale, l'utilisation de modèles permettant aux machines de percevoir et d'agir dans le monde réel, est devenue essentielle à la croissance de l'entreprise au-delà du centre de données.