NVIDIA Blackwell alimente l’IA en temps réel pour les workflows de divertissement

La série de GPU Blackwell RTX PRO fait progresser la création de contenu intelligent, l'hyper-personnalisation des médias et les pipelines de diffusion vidéo en direct.
by Richard Kerris

L’IA façonne l’industrie des médias et du divertissement depuis plusieurs décennies, depuis l’avènement des tout premiers moteurs de recommandation jusqu’aux nouvelles techniques de montage et d’automatisation pour la génération d’effets visuels reposant sur l’IA. La technologie de l’IA en temps réel, qui permet aux entreprises de créer activement du contenu, de personnaliser les expériences de visualisation et de fournir rapidement des informations utiles, marque le début d’une nouvelle ère de transformation numérique.

Grâce à la série de GPU NVIDIA RTX PRO Blackwell, annoncée hier lors de la NVIDIA GTC (la conférence mondiale incontournable sur l’IA), les entreprises spécialisées dans les médias peuvent désormais exploiter l’IA en temps réel pour enrichir leurs workflows de conception multimédia avec une vitesse, une efficacité et un potentiel créatif sans précédent.

NVIDIA Blackwell sert de base à l’initiative NVIDIA Media2, qui facilite le recours à l’IA en temps réel en réunissant des technologies NVIDIA (notamment des microservices NVIDIA NIM, les modèles d’IA de NVIDIA, des plateformes de calcul accéléré et des logiciels spécialisés d’IA générative) afin de transformer tous les aspects des expériences multimédia et des workflows de production, à commencer par la création de contenu, le streaming et la diffusion en direct.

Au cœur de la création de contenu intelligent

Le calcul accéléré enrichit les workflows basés sur l’IA avec des capacités de traitement de jeux de données massifs en temps réel, permettant ainsi un rendu, une simulation et une génération de contenu plus rapides.

Les GPU NVIDIA RTX PRO Blackwell incluent de nouvelles fonctionnalités qui autorisent des performances graphiques et d’IA sans précédent. Le multiprocesseur de streaming de NVIDIA offre un débit jusqu’à 1,5 fois plus élevé qu’avec les GPU de génération NVIDIA Ada, et il alimente de nouveaux shaders neuronaux qui intègrent l’IA dans des shaders programmables pour la création de contenu.

Les cœurs RT de quatrième génération offrent des performances jusqu’à deux fois supérieures et permettent de créer des scènes animées photoréalistes et de très haute précision physique. Les cœurs Tensor de cinquième génération offrent jusqu’à 4 000 billions d’opérations d’IA par seconde et prennent en charge le niveau de précision FP4. Mais ce n’est pas tout : jusqu’à 96 Go de mémoire GDDR7 boostent la bande passante et la capacité du GPU, permettant ainsi aux applications de tourner plus rapidement et de prendre en charge des jeux de données plus volumineux et plus complexes pour des projets 3D et d’IA massifs, des environnements de réalité virtuelle à grande échelle et bien plus encore.

Elio © Disney/Pixar

« L’un des aspects les plus passionnants des nouvelles technologies est la façon dont elles permettent à nos infographistes d’améliorer leurs workflows de création, » a déclaré Steve May, directeur de la technologie de Pixar Animation Studios. « Avec le nouveau moteur de rendu de Pixar, RenderMan XPU (optimisé pour la plateforme NVIDIA Blackwell), jusqu’à 99 % des scènes de Pixar peuvent désormais être prises en charge en toute fluidité grâce aux 96 Go de mémoire dédiée des GPU NVIDIA RTX PRO 6000 Blackwell. Cette avancée va fondamentalement améliorer notre façon de créer des films. »

© Lucasfilm Ltd.

« Nos infographistes atteignaient fréquemment les limitations des cartes de 48 Go en travaillant sur des environnements ILM StageCraft, et ils devaient en outre composer avec des problèmes de performance sur le plateau pour les rendus en temps réel en résolution 6K et 8K, » a déclaré Stephen Hill, ingénieur principal en rendu chez Lucasfilm. « Le nouveau GPU NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition lève ces limitations et nous constatons une augmentation des performances de l’ordre de 2,5 fois par rapport à nos GPU de production actuels. De plus, avec 96 Go de VRAM dédiée, nous avons maintenant deux fois plus de mémoire à notre disposition. »

Le rendu neuronal avec NVIDIA RTX Kit fournit un ray tracing de qualité cinématographique et des graphismes améliorés par l’IA aux moteurs de rendu en temps réel, ce qui contribue à augmenter la fidélité visuelle dans les films, les contenus de télévision et les médias interactifs. RTX Kit, qui prend en charge la compression neuronale des textures, les shaders neuronaux, RTX Global Illumination et la technologie Mega Geometry, centralise un ensemble de technologies de rendu neuronal qui améliorent les graphismes pour les jeux, l’animation, les scènes de production virtuelle et les expériences immersives.

Entrez dans l’avenir du streaming et de l’analyse de données

L’analyse de données contribue à transformer les informations brutes sur l’audience en intelligence exploitable, et ce plus rapidement que jamais. Les frameworks de calcul accéléré et d’IA de NVIDIA permettent aux studios d’analyser le comportement des spectateurs, de prédire les modèles d’engagement et d’optimiser le contenu en temps réel, offrant ainsi des expériences hyper-personnalisées et des décisions créatives toujours plus intelligentes.

Grâce à la puissance des nouveaux GPU de NVIDIA, les utilisateurs peuvent procéder à une acquisition et à une transformation de données en temps réel grâce à l’accélération GPU du chargement et du nettoyage des données à grande échelle.

Les technologies de NVIDIA qui accélèrent le streaming et l’analyse de données incluent une suite exhaustive de bibliothèques de traitement des données CUDA-X de NVIDIA permettant de réduire la latence et d’obtenir des informations de manière immédiate à partir de flux de données en continu. Ces bibliothèques incluent :

    • NVIDIA cuML : permet d’accélérer l’entraînement et l’inférence des modèles de recommandation par GPU à l’aide d’algorithmes scikit-learn, fournissant ainsi des capacités de personnalisation en temps réel et des recommandations de contenu pertinentes et actualisées qui stimulent l’engagement des spectateurs tout en réduisant la perte de clientèle.
    • NVIDIA cuDF : prend en charge les opérations pandas relatives aux DataFrames sur les GPU, ce qui permet d’extraire, de transformer et de charger les opérations et les analyses de données plus rapidement et plus efficacement que jamais grâce aux capacités d’accélération des GPU de NVIDIA. cuDF contribue à optimiser la diffusion du contenu en analysant les données utilisateur pour prévoir la demande et ajuster la distribution du contenu en temps réel, améliorant ainsi l’expérience utilisateur globale

.

Avec cuML et cuDF, les bibliothèques de science des données accélérées permettent une intégration transparente à la bibliothèque open-source Dask pour les clusters multi-GPU ou les clusters multi-nœuds. L’importante capacité de mémoire dédiée des GPU NVIDIA RTX Blackwell PRO permet de gérer plus efficacement des jeux de données volumineux et des pics d’utilisation élevés, sans pour autant sacrifier les performances.

Par ailleurs, le système de recherche et de synthèse vidéo intègre des modèles de langage de vision et de grands modèles de langage, tout en fournissant des modules Cloud natifs pour faciliter le développement des applications d’analyse, de recherche et de synthèse vidéo.

Donner vie aux médias en direct

Grâce aux GPU NVIDIA RTX PRO Blackwell, les diffuseurs bénéficient de performances sans précédent pour le traitement vidéo en haute résolution, la réalité augmentée en temps réel, la production de contenu et l’analyse de vidéos reposant sur l’IA.

Les nouvelles fonctionnalités incluent :

  • NVIDIA NVENC de 9e génération : pend désormais en charge l’encodage 4:2:2, ce qui permet d’accélérer l’encodage vidéo et d’améliorer la qualité des applications de diffusion et de médias en direct tout en réduisant les coûts de stockage des vidéos non compressées.
  • NVIDIA NVDEC de 6e génération : offre un débit de décodage H.264 jusqu’à deux fois plus élevé et prend en charge le décodage H.264 et HEVC 4:2:2. Les professionnels peuvent par conséquent profiter d’une lecture vidéo de haute qualité, accélérer l’acquisition des données vidéo et utiliser des fonctionnalités avancées de montage vidéo basées sur l’IA.
  • PCIe de 5e génération : fournit deux fois plus de bande passante que la génération précédente, ce qui améliore les vitesses de transfert de données à partir de la mémoire du CPU et permet d’obtenir des performances plus rapides pour les tâches gourmandes en données.
  • DisplayPort 2.1 : permet d’utiliser des écrans en haute résolution jusqu’en résolution 8K à 240 Hz et en résolution 16K à 60 Hz. Une bande passante accrue permet des configurations multi-écrans fluides, tandis qu’une plage dynamique optimisée et une profondeur de couleurs plus élevée offrent une précision colorimétrique accrue pour des tâches telles que le montage vidéo et la diffusion en direct.

« Le GPU NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition est une force transformatrice dans la mission de Cosm qui consiste à redéfinir le divertissement immersif, » déclare Devin Poolman, directeur des produits et de la technologie chez Cosm, une entreprise mondiale spécialisée dans les technologies, les médias et le divertissement immersifs. « Ses performances inégalées nous permettent de repousser les limites du rendu en temps réel, en profitant d’une résolution ultra-élevée et des fréquences d’images fluides nécessaires pour que nos expériences immersives en direct soient virtuellement indiscernables de la réalité. »

En tant que composant-clé des écrans à dôme LED 12K du système CX de Cosm, le RTX PRO 6000 Max-Q permet de fusionner de manière transparente les mondes physiques et numériques pour offrir des expériences de réalité partagée, permettant au public d’interagir avec les contenus sportifs, les événements en direct et le contenu cinématographique d’une manière totalement nouvelle.

L’expérience de réalité partagée de Cosm s’appuie sur un écran LED de 26 mètres de diamètre en résolution 12K, avec des millions de pixels fournissant une luminosité jusqu’à 10 fois plus élevée que l’écran de cinéma le plus lumineux du marché.​ Image fournie par Cosm.

Si vous souhaitez en savoir plus sur NVIDIA Media2, regardez la keynote de NVIDIA à la GTC et inscrivez-vous pour suivre des sessions spéciales de NVIDIA et de leaders du marché lors du salon, qui se déroule jusqu’au vendredi 21 mars.

Essayez les microservices NIM et les modèles d’IA de NVIDIA sur build.nvidia.com.