NVIDIA étend ses familles de modèles ouverts pour alimenter la nouvelle vague d’IA agentique, physique et de santé

les modèles d'omni-compréhension de NVIDIA Nemotron 3 alimentent les agents d'IA en fournissant des conversations naturelles, un raisonnement complexe et des capacités visuelles avancées.
by NVIDIA Writers

Résumé des actualités :

  • Les modèles d’omni-compréhension NVIDIA Nemotron 3 alimentent les agents d’IA en fournissant des conversations naturelles, un raisonnement complexe et des capacités visuelles avancées.
  • Les modèles NVIDIA Isaac GR00T N1.7, NVIDIA Alpamayo 1.5 et NVIDIA Cosmos 3 repoussent les limites du raisonnement et de l’action de l’IA physique sur les robots et les véhicules autonomes.
  • Intégré à la plateforme NVIDIA BioNeMo, le modèle Proteina-Complexa accélère la découverte de médicaments à base de protéines, avec un nouveau jeu de données ouvert comprenant des millions de nouvelles prédictions de complexes protéiques par l’IA, développées par NVIDIA, Google DeepMind, l’Institut européen de bioinformatique de l’EMBL et l’Université nationale de Séoul.
  • Les modèles ouverts de NVIDIA sont adoptés par CodeRabbit, CrowdStrike, Cursor, Factory, ServiceNow et Perplexity pour l’IA agentique, par LG Electronics et Milestone Systems pour l’IA physique, et par Novo Nordisk, Viva Biotech et Manifold Bio pour l’IA pour la santé.

GTC — NVIDIA a annoncé aujourd’hui l’extension de ses familles de modèles ouverts pour alimenter la nouvelle vague d’IA agentique, physique et de santé, en introduisant de nouveaux modèles permettant aux développeurs et aux scientifiques de créer des systèmes intelligents capables de raisonner et d’agir dans des environnements numériques et réels.

Les modèles ouverts sont essentiels pour faire progresser l’innovation à l’échelle mondiale. Le portefeuille en pleine expansion de NVIDIA, qui inclut NVIDIA Nemotron™ pour les systèmes agentiques, NVIDIA Cosmos™ pour l’IA physique, NVIDIA Alpamayo pour les véhicules autonomes, NVIDIA Isaac™ GR00T pour la robotique et NVIDIA BioNeMo™ pour la recherche biomédicale, fournit des modèles et des frameworks avancés pour libérer de nouvelles capacités dans tous les secteurs.

« L’IA open source est devenue une force mondiale en matière d’innovation », a déclaré Kari Briski, vice-présidente des logiciels d’IA générative chez NVIDIA. « De la biologie et des découvertes scientifiques à la robotique et aux machines autonomes, les familles de modèles ouverts de NVIDIA étendent l’intelligence au-delà du langage, permettant ainsi aux développeurs du monde entier de créer des agents intelligents et de réaliser des avancées dans les industries numériques et physiques. »

Les modèles NVIDIA Nemotron 3 Ultra, Omni et VoiceChat alimentent les agents d’IA

La famille NVIDIA Nemotron s’étend avec des modèles d’omni-compréhension pour le langage, la vision, la voix et la sécurité, étendant ainsi l’intelligence multimodale pour aider les développeurs à concevoir une IA agentique spécialisée.

Les modèles multimodaux d’omni-compréhension de NVIDIA Nemotron 3 alimentent les agents d’IA en fournissant des conversations naturelles, un raisonnement complexe et des capacités visuelles avancées.

  • Nemotron 3 Ultra fournit une intelligence de pointe avec une efficacité de débit multipliée par 5 avec le format NVFP4 sur la plateforme NVIDIA Blackwell afin d’alimenter des applications d’IA native, telles que les assistants de codage, les solutions de recherche et l’automatisation des workflows complexes.
  • Nemotron 3 Omni intègre l’audio, la vision et la compréhension des langues, ce qui permet aux agents d’IA d’extraire des informations à partir de vidéos et de documents avec une efficacité et une précision élevées.
  • Nemotron 3 VoiceChat prend en charge des conversations en temps réel dans lesquelles l’IA écoute et répond simultanément. Ce modèle combine en un seul système la reconnaissance vocale automatique, le traitement des grands modèles de langage et des capacités de conversion de texte en parole.
  • Les modèles de sécurité et le pipeline de récupération Nemotron renforcent les systèmes multimodaux fiables en détectant le contenu dangereux dans le texte et les images, tandis qu’un pipeline de récupération agentique améliore la pertinence et la précision des résultats.

LangChain a intégré les modèles NVIDIA Nemotron et d’autres logiciels NVIDIA Agent Toolkit à sa plateforme de développement d’agents, ce qui a permis aux entreprises de créer, de déployer et de surveiller des assistants d’IA intelligents capables d’automatiser des tâches complexes à l’échelle de l’entreprise.

Des entreprises de premier plan, telles que Automation Anywhere, CodeRabbit, CrowdStrike, Cursor, Factory, Distyl, Genspark, Perplexity et ServiceNow, déploient les modèles NVIDIA Nemotron pour alimenter des applications agentiques avancées. Edison Scientific utilise NVIDIA Nemotron comme composant intégral de Kosmos, un scientifique en IA autonome utilisé par plus de 50 000 chercheurs pour effectuer des centaines de tâches de recherche en parallèle, ce qui permet de compresser des mois de recherche en une seule journée.

Les développeurs d’IA du monde entier utilisent les données et les frameworks des modèles Nemotron pour créer des modèles souverains qui servent des milliards de personnes dans leur langue maternelle et qui s’alignent sur les cultures et les valeurs locales. Ceux-ci incluent AI Singapore, Bielik.ai, Indosat Ooredoo Hutchison, LINAGORA, SOOFI, Stockmark, Trillion Labs, Viettel et YTL AI Labs.

NVIDIA a également publié Nemotron-Personas, une collection de jeux de données entièrement synthétiques qui préservent la vie privée, basés sur des données de recensement et démographiques locales. Le jeu de données sur la France, développé en collaboration avec Pleias, est disponible dès aujourd’hui et vient s’ajouter aux jeux de données existants pour les États-Unis, le Japon, l’Inde, le Brésil et Singapour.

De nouveaux modèles ouverts font progresser le raisonnement de l’IA physique

NVIDIA accélère le développement de systèmes autonomes avec de nouveaux modèles de fondation et des outils de simulation conçus pour aider les robots et les véhicules à percevoir, à raisonner et à agir dans le monde physique. Ces éléments incluent :

  • NVIDIA Cosmos 3, le premier modèle de fondation de monde à unifier la génération de monde synthétique, le raisonnement de l’IA physique et la simulation d’actions, devrait bientôt être disponible afin d’aider l’IA physique à fonctionner dans des environnements complexes.
  • NVIDIA Isaac GR00T N1.7, un modèle ouvert de raisonnement, de vision, de langage et d’action (VLA) spécialement conçu pour les humanoïdes, est désormais commercialement viable pour un déploiement en conditions réelles.
  • NVIDIA Alpamayo 1.5, un modèle VLA de raisonnement, stimule le raisonnement des véhicules autonomes avec des conseils de navigation, un conditionnement par prompt, une prise en charge multi-caméras flexible et des paramètres de caméra configurables.

Au cours de sa keynote à la GTC, Jensen Huang, fondateur et PDG de NVIDIA, a également présenté un aperçu de GR00T N2, un modèle de fondation de robots de nouvelle génération basé sur les recherches menées par DreamZero. Basé sur une nouvelle architecture de modèle d’action du monde, ce modèle aide les robots à mener à bien de nouvelles tâches dans de nouveaux environnements plus de deux fois plus souvent que les principaux modèles VLA. Disponible d’ici la fin de l’année, GR00T N2 occupe actuellement la première place sur MolmoSpaces et RoboArena pour les politiques de robots généralistes.

HCLTech, Johnson & Johnson MedTech, Milestone Systems, mimic robotics, Skild AI, Tulip et le Toyota Research Institute utilisent NVIDIA Cosmos pour accélérer l’entraînement par IA physique et l’analyse vidéo. Humanoid, LG Electronics, NEURA et Noble Machines adoptent NVIDIA Isaac GR00T N1.7 pour faire évoluer le déploiement des robots humanoïdes.

Les modèles ouverts accélèrent la recherche en matière de santé et de sciences de la vie

NVIDIA fait progresser la découverte basée sur l’IA dans les domaines de la santé et des sciences de la vie avec des modèles de fondation multimodaux ouverts et des jeux de données qui accélèrent la recherche biomédicale, la découverte de médicaments, l’imagerie médicale et la compréhension de la littérature scientifique.

NVIDIA BioNeMo se développe en tant que plateforme ouverte de développement de l’IA pour la santé et les sciences de la vie, permettant ainsi aux chercheurs de modéliser, de concevoir et de simuler des systèmes biologiques à grande échelle.

Proteina-Complexa est un modèle génératif pour la conception de liants protéiques qui accélère la découverte de médicaments et le développement thérapeutique basés sur la structure. Novo Nordisk, Viva Biotech et Manifold Bio utilisent Proteina-Complexa pour concevoir des protéines qui se lient à une protéine-cible, et ont testé de manière expérimentale les conceptions générées.

NVIDIA a collaboré avec l’Institut européen de bioinformatique de l’EMBL, Google DeepMind et l’Université nationale de Séoul pour développer massivement la base de données de structure des protéines AlphaFold — en calculant environ 30 millions de prédictions de complexes protéiques et en ajoutant 1,7 million de prédictions à haute confiance à la base de données AlphaFold — afin d’accélérer la découverte de nouvelles cibles pharmaceutiques et la biologie des maladies.

NVIDIA a également présenté nvQSP, un moteur de simulation accéléré par GPU qui permet aux chercheurs pharmaceutiques d’explorer un nombre beaucoup plus élevé de scénarios de traitement à l’aide de modèles informatiques avant le début des essais cliniques. Lors de tests de référence, nvQSP a fourni des performances jusqu’à 77 fois plus rapides par rapport aux simulations CPU traditionnelles à thread unique, ce qui a permis aux scientifiques d’analyser des centaines de niveaux de dose et de sous-populations de patients en un temps qu’il fallait auparavant pour n’en simuler que quelques-uns.

Disponibilité

Une sélection de modèles, de données et de frameworks ouverts de NVIDIA sont disponibles sur GitHub et Hugging Face, sur une gamme de plateformes d’infrastructure Cloud, d’inférence et d’IA, et sur build.nvidia.com.

Beaucoup de ces modèles sont également disponibles sous forme de microservices NVIDIA NIM pour un déploiement sécurisé et évolutif sur n’importe quelle infrastructure accélérée par NVIDIA, de l’Edge au Cloud.

Regardez la keynote de Huang au GTC et découvrez les sessions.