Transformez n’importe quelle pièce en véritable studio personnel avec la nouvelle application NVIDIA Broadcast basée sur l’IA

Cette année, le monde du streaming a connu une forte croissance : le nombre de streameurs sur Twitch a augmenté de 89 % et le nombre de spectateurs de 56%. Des célébrités de tous horizons ont par ailleurs rejoint le mouvement, comme Terry Crews, Post Malone ou Logic.

Avec les cartes graphiques GeForce RTX série 20,nous avions développé un nouvel encodeur NVIDIA (NVENC) qui permettait d'obtenir une qualité d'image supérieure tout en allégeant la charge de travail du CPU pour améliorer la fluidité des jeux. Nous avions également étroitement collaboré avec les développeurs d’applications de streaming telles qu'OBS, Discord, Streamlabs, Twitch Studio et Xsplit afin d'optimiser les performances de diffusion.

Si ces initiatives ont permis d'améliorer la qualité d'encodage des vidéos, elles ne suffisent pas à produire des diffusions du plus haut niveau : la qualité audio, la caméra et le cadre de l'enregistrement sont tout aussi essentiels à la satisfaction du spectateur. Cependant, tout le monde n'a pas la chance de pouvoir enregistrer dans un studio dédié, avec une caméra, des micros et des fonds verts souvent très coûteux.

Avec le lancement en grande pompe des GPU GeForce RTX série 30,nous allons aider les streameurs à franchir un nouveau cap grâce à l’application NVIDIA Broadcast, à haut degré d’innovation. En effet, grâce à la puissance de l'IA, celle-ci transforme n'importe quelle pièce en véritable studio d'enregistrement, et elle métamorphose les webcams et les micros traditionnels pour les convertir en dispositifs intelligents.

L'application Broadcast intègre trois fonctionnalités optimisées par l’IA :

• Réduction du bruit : supprimez les bruits de fond captés par votre micro, comme les aboiements du chien ou la sonnerie de la porte d'entrée. Le réseau d'IA peut aussi être appliqué aux flux audio entrants pour neutraliser les bruits de clavier de vos quelques amis qui refusent toujours d'utiliser la fonction Push-to-Talk.
• Arrière-plan virtuel : supprimez l'arrière-plan capturé par votre webcam et remplacez-le par des images d’un jeu, un autre fond ou un léger flou.
• Recadrage automatique : l'IA zoome sur votre visage et suit les mouvements de votre tête afin de vous maintenir au centre de l'image, même lorsque vous vous penchez ou vous déplacez, comme si vous aviez votre propre cameraman.

Ces fonctionnalités ne se limitent pas à la diffusion de jeux. Vous pouvez également en profiter lors de vos visioconférences avec Zoom, ou lorsque vous jouez avec vos amis sur Discord.

NVIDIA Broadcast est un plug-in universel qui fonctionne avec la plupart des applications de streaming, de chat vocal et de visioconférence. L’application est compatible avec tous les GPU NVIDIA GeForce RTX, TITAN RTX ou Quadro RTX, dont elle exploite les processeurs d’IA (appelés cœurs Tensor) pour permettre aux réseaux d'IA de l'application de fonctionner en temps réel, parallèlement à vos jeux.

Pour ceux d'entre vous qui voudraient tester les capacités de réduction du bruit basées sur l'IA mais ne sont pas encore prêts à upgrader leur machine avec un GPU RTX, nous proposons également un patch pour RTX Voice ,qui incorpore une première version bêta de la fonctionnalité incluse dans NVIDIA Broadcast, compatible avec les GPU NVIDIA GeForce GTX. Attention, toutefois, les résultats peuvent varier avec les GPU les plus anciens.

Les nouveaux GPU GeForce RTX série 30 combinent le meilleur encodeur matériel de l’industrie à des effets vocaux et vidéo accélérés par l’IA via NVIDIA Broadcast, vous offrant ainsi une puissance suffisante pour streamer comme un pro. Reconnectez-vous prochainement ce mois-ci pour télécharger l’application NVIDIA Broadcast.