NVIDIA Media2 transforme la création de contenu, le streaming et les expériences du public avec l’IA

Les technologies NVIDIA, y compris les microservices NIM et les modèles d'IA, rationalisent les pipelines vidéo d'IA et améliorent l'engagement du public, dans le cadre d'une initiative visant à transformer l'industrie des médias qui pèse 3 000 milliards de dollars.
by Richard Kerris

De la création du GPU, du ray tracing en temps réel RTX et du rendu neuronal à la réinvention du calcul pour l’IA, NVIDIA est à la pointe de l’infographie depuis des décennies, repoussant les limites du possible dans les médias et le divertissement.

NVIDIA Media2 est la dernière initiative basée sur l’IA qui transforme la création de contenu, le streaming et les expériences multimédia en direct.

Fondé sur les technologies embarquées comme les microservices NVIDIA NIM et les AI Blueprints et sur des applications d’IA révolutionnaires provenant de start-up et de partenaires logiciels, Media2 utilise l’IA pour créer un contenu plus intelligent, plus personnalisé et plus percutant, capable de s’adapter aux préférences individuelles des spectateurs.

Au milieu de cette transformation créative rapide, les entreprises qui adoptent NVIDIA Media2 peuvent rester à la pointe de l’industrie des médias et du divertissement, dont la valeur est de 3 000 milliards de dollars, en réimaginant la manière dont le public consomme et interagit avec le contenu.

NVIDIA Media2 est la dernière initiative basée sur l’IA qui transforme la création de contenu, le streaming et les expériences multimédias en direct.

À l’heure où le secteur des médias et du divertissement adopte l’IA générative et le calcul accéléré, les technologies NVIDIA transforment la manière dont le contenu est créé, diffusé et vécu.

NVIDIA Holoscan pour les médias est une plateforme définie par logiciel qui permet aux entreprises de la radiodiffusion, du streaming et du sport en direct d’exécuter des pipelines vidéo en direct sur la même infrastructure que l’IA. La plateforme fournit des applications de fournisseurs du secteur sur une infrastructure accélérée par NVIDIA.

NVIDIA Holoscan pour les médias

L’architecture NVIDIA Blackwell fournit la puissance nécessaire pour alimenter la prochaine vague de création de contenu intelligent amélioré par les données et les médias hyper-personnalisés. Elle est conçue pour gérer des workflows d’IA générative à l’échelle des datacenters avec une efficacité énergétique jusqu’à 25 fois supérieure à celle de la génération NVIDIA Hopper. Blackwell intègre six types de puces : GPU, CPU, DPU, puces de commutation NVIDIA NVLink, commutateurs NVIDIA InfiniBand et commutateurs Ethernet.

L’architecture NVIDIA Blackwell est prise en charge par NVIDIA AI Enterprise, une plateforme logicielle de bout en bout pour l’IA de production. NVIDIA AI Enterprise comprend des microservices NIM, des frameworks d’IA, des bibliothèques et des outils que les entreprises du secteur du média peuvent déployer sur des clouds, des data centers et des stations de travail accélérés par NVIDIA. Dans cette liste toujours plus longue, on peut citer :

  • Le microservice NIM Mistral-NeMo-12B-Instruct, qui permet la récupération d’informations multilingues, c’est-à-dire la capacité de rechercher, de traiter et de récupérer des connaissances dans toutes les langues, est essentiel pour améliorer les sorties d’un modèle d’IA en lui conférant une précision et une pertinence mondiales accrues.
  • Le modèle NVIDIA Omniverse pour le conditionnement 3D pour une IA générative visuelle précise, qui peut aider les annonceurs à créer facilement du contenu marketing personnalisé, fidèle à la marque et précis aux produits à grande échelle à l’aide du rendu en temps réel et de l’IA générative sans affecter un actif de produit phare.
  • NVIDIA NeMo Retriever intègre et reclasse les microservices NIM, capables de vectoriser des documents texte, des transcriptions, des articles de presse et d’autres contenus écrits. Les entreprises du secteur de l’information pour étendre leurs efforts d’IA générative et créer des systèmes précis et multilingues.
  • Le microservice NIM NVIDIA Cosmos Nemotron est un modèle de langage de vision NVIDIA qui est un VLM multimodal capable de comprendre le sens et le contexte du texte, des images et de la vidéo. Avec ce microservice, les entreprises du secteur peuvent interroger des images et des vidéos en langage naturel et recevoir des réponses informatives.
  • L’architecture d’IA générative multimodale NVIDIA Edify, capable de générer des ressources visuelles, comme des images, des modèles 3D et des environnements HDRi, à partir d’invites textuelles ou d’images. Elle offre des outils d’édition avancés et une formation efficace pour les développeurs. Avec NVIDIA AI Foundry, les fournisseurs de services peuvent personnaliser les modèles Edify pour les services visuels commerciaux à l’aide des microservices NVIDIA NIM.

Les partenaires de l’écosystème Media2

Dans tout le secteur adoptent la technologie NVIDIA pour remodeler le prochain chapitre de la narration.

Getty Images et Shutterstock sont des services de création de contenu intelligent conçus avec NVIDIA Edify. Les modèles d’IA ont également été optimisés et empaquetés pour des performances maximales avec les microservices NVIDIA NIM.

Bria est une plateforme d’IA générative visuelle conçue pour les développeurs. Elle est formée sur des données sous licence à 100 % et elle est basée sur des principes d’IA responsables. La plateforme offre des outils pour les pipelines personnalisés, une intégration transparente et un déploiement flexible, garantissant une conformité de niveau entreprise et une génération de contenu évolutive et prévisible. Optimisée avec les microservices NVIDIA NIM, Bria offre des solutions prêtes à la production plus rapides, plus sûres et plus évolutives.

Runway est une plateforme d’IA qui fournit des outils créatifs avancés pour les artistes et les cinéastes. Le modèle Alpha Turbo de troisième génération de l’entreprise excelle dans la génération vidéo et comprend une nouvelle fonction de contrôle de la caméra qui permet des mouvements précis de la caméra comme l’inclinaison et le zoom. L’intégration par Runway de la bibliothèque open source NVIDIA CV-CUDA combinée aux GPU NVIDIA accélère le prétraitement des vidéos haute résolution dans son modèle de segmentation.

Wonder Dynamics, une société Autodesk, a récemment lancé la version bêta de Wonder Animation, qui comprend une nouvelle technologie puissante de conversion de scène vidéo en 3D capable de transformer n’importe quelle séquence vidéo en scène animée en 3D pour la production de films d’animation. Accéléré par la technologie NVIDIA GPU, Wonder Animation fournit aux artistes et aux animateurs d’effets visuels un outil flexible et facile à utiliser qui réduit considérablement le temps, la complexité et les efforts traditionnellement associés aux workflows d’animation et d’effets visuels, tout en permettantà l’artiste de conserver un contrôle créatif total.

L’équipe d’innovation Sky de Comcast collabore avec NVIDIA pour tester en laboratoire les microservices NVIDIA NIM et les modèles partenaires pour ses plateformes mondiales. L’intégration pourrait conduire à une plus grande interactivité et accessibilité pour les clients du monde entier, par exemple en permettant l’utilisation de commandes vocales pour demander des résumés pendant les sports en direct et accéder à d’autres informations contextuelles.

, une entreprise de technologies créatives et qui abrite le plus grand réseau de studios virtuels, élargit l’accèsà la création d’environnements virtuels et de contenu immersif avec les technologies d’IA générative accélérées par NVIDIA.

Twelve Labs, membre du programme NVIDIA Inception pour les start-up, développe des modèles de fondation multimodaux avancés capables de comprendre les vidéos comme les humains, ce qui permet une recherche sémantique précise, l’analyse de contenu et la génération de vidéo en texte. Twelve Labs utilise les GPU NVIDIA H100 pour améliorer considérablement les performances d’inférence des modèles, permettant d’améliorer jusqu’à 7 fois les demandes servies par seconde.

La solution de S4 Capital utilise les technologies d’IA de pointe pour améliorer les émissions en direct grâce à une segmentation du contenu en temps réel et des expériences personnalisées des fans.

Alimentée par NVIDIA Holoscan pour les médias, la solution de l’entreprise est intégrée à des outils comme NVIDIA pour générer des métadonnées contextuelles à injecter dans un cadre de magasin multimédia adressable dans le temps, ce qui permet une recherche précise et basée sur l’action dans le contenu vidéo. En combinant ces technologies, les diffuseurs peuvent fournir de manière transparente un contenu hyper pertinent aux fans au fur et à mesure que les événements se déroulent, tout en s’adaptant à l’évolution des exigences du public moderne.

Les entreprises de médias gèrent de grandes quantités de contenu vidéo, dont la localisation, le catalogage et la compilation en actifs finis peuvent s’avérer difficiles et fastidieux. Qvest, consultant et intégrateur de systèmes leader dans le domaine des médias, a développé un moteur de découverte vidéo IA, basé sur les microservices NIM, qui accélère ce processus en automatisant la capture des données des fichiers vidéo. Cela simplifie la capacité de l’utilisateur à découvrir et à contextualiser la manière dont les vidéos peuvent s’intégrer dans l’histoire qu’il souhaite raconter.

Verizon transforme les opérations des entreprises mondiales, ainsi que les médias en direct et le contenu sportif, en intégrant son réseau 5G privé, fiable et sécurisé, à la plate-forme d’IA complète de NVIDIA, y compris NVIDIA AI Enterprise et les microservices NIM, pour fournir les dernières solutions d’IA à la périphérie.

Grâce à cette solution, les diffuseurs, les ligues sportives et les détenteurs de droits peuvent améliorer l’expérience des fans avec plus d’interactivité et d’immersion en déployant une connectivité 5G haute performance ainsi que des applications d’IA générative, d’IA agentique, de réalité étendue et de diffusion en continu qui permettent de fournir un contenu personnalisé. Ces technologies contribuent également à élever les performances des joueurs et l’engagement des spectateurs en offrant des analyses de données en temps réel aux entraîneurs, aux joueurs, aux arbitres et aux fans. Elle peut également permettre des cas d’utilisation privés d’IA d’entreprise alimentés par la 5G pour stimuler l’automatisation et la productivité.

Bienvenue chez NVIDIA Media2

L’initiative NVIDIA Media2 permet aux entreprises de redéfinir l’avenir des médias et des loisirs grâce à des technologies intelligentes, immersives et basées sur les données. Elle leur donne un avantage concurrentiel tout en les équipant pour stimuler l’innovation dans l’ensemble de l’industrie.

Les microservices NIM de NVIDIA et des développeurs de modèles sont désormais disponibles à l’essai, et de nouveaux modèles sont régulièrement ajoutés.

Commencez avec NVIDIA NIM et AI Blueprints, et regardez le discours d’ouverture du CES prononcé par Jensen Huang, fondateur et CEO de NVIDIA, pour découvrir les dernières avancées en matière d’IA.

Voir l’avis concernant les informations sur les produits logiciels.