FAQ SUR L’APPLICATION NVIDIA BROADCAST

NVIDIA Broadcast est une application qui transforme n'importe quelle pièce en véritable studio de diffusion à domicile, et qui métamorphose les webcams et les micros traditionnels en dispositifs intelligents grâce à la puissance phénoménale de l'IA. Améliorez la qualité vidéo et audio de votre livestream grâce aux fonctionnalités d'IA telles que le fond virtuel, le recadrage automatique de la webcam et la suppression du bruit du micro. Grâce aux processeurs d'IA dédiés Tensor Cores intégrés aux cartes graphiques GeForce RTX, les réseaux d'IA peuvent exécuter des effets de haute qualité en temps réel.

Et même lorsque vous ne diffusez pas du contenu en direct, NVIDIA Broadcast peut également optimiser vos appels en visioconférence et vos conversations vocales grâce à l’IA, ce qui en fait une application compagnon idéale pour tous les utilisateurs.

L’application NVIDIA Broadcast inclut diverses fonctionnalités :

Microphone/haut-parleur

  • Suppression du bruit : éliminez les bruits de fond gênants captés par votre microphone afin que votre public puisse vous entendre clairement. L'application NVIDIA Broadcast peut également être utilisée pour traiter l'audio entrant, ainsi vous ne manquerez pas un seul instant lors de vos chats vocaux.
  • Suppression de l'écho de la pièce : utilisez l’IA pour filtrer l’écho ou la réverbération dans la pièce, se produisant généralement dans les petits espaces, pour une qualité de sortie nettement plus élevée.
  • Studio Voice : Studio Voice utilise un égaliseur IA pour améliorer spectralement votre voix, comme si vous enregistriez dans un studio haut de gamme. Studio Voice propose quatre profils de microphones : Default, Bright, Full et Warm.

Caméra

  • Arrière-plan virtuel : supprimez l'arrière-plan capturé par votre webcam et remplacez-le par des images d’un jeu, un autre fond ou un léger flou.
  • Auto Frame : suit dynamiquement vos mouvements en temps réel, zoomant et recadrant automatiquement afin que vous restiez le centre de l'attention, même lorsque vous bougez.
  • Réduction du bruit vidéo : réduit le bruit de l’image généralement présent dans les conditions de faible luminosité
  • Contact visuel : utilise l’IA pour ajuster votre regard afin de donner l’impression que vous regardez directement la caméra, même lorsque vous lisez des notes ou détournez les yeux.
  • Vignettage : simule un effet d'objectif en assombrissant les coins de l'écran.
  • Virtual Key Light : restez prêt à être pris en charge par la caméra grâce au rééclairage automatique du visage, qui réduit les ombres et vous permet de rester bien éclairé pendant vos livestreams.
  • RTX Video Super Resolution (beta) permet d'améliorer la qualité des vidéos provenant d'une webcam ou d'un fichier jusqu'à une résolution de 4K.
  • La génération d’images RTX Video (bêta) augmente la fréquence d’images de la webcam jusqu’à 60 i/s en mode direct et multiplie par 2 ou par 4 la fréquence d’images des vidéos enregistrées à l’aide de File Processor.

Oui ! Dans la version 2.0.0, nous avons inclus la possibilité d’exécuter plusieurs effets à la fois. Vous pouvez combiner autant d’effets dans votre micro, votre haut-parleur et/ou votre caméra que votre GPU peut en gérer. Tous les effets ne peuvent pas être combinés.

Veuillez noter que combiner plusieurs effets peut impacter les performances de votre système.

La réduction du bruit vidéo est un effet d’IA qui réduit le bruit visuel dans le flux vidéo de votre caméra, généralement présent dans les conditions de faible luminosité. Cet effet est particulièrement utile pour les webcams, dont les capteurs peuvent parfois engendrer du bruit vidéo et donner l’impression d’un flux vidéo de mauvaise qualité. La fonctionnalité de suppression du bruit vidéo nettoie le bruit dans les flux vidéo, offrant ainsi une qualité d’image égalant celle fournie par les webcams premium.

La suppression de l’écho est un effet d’IA qui réduit l’écho ou la réverbération de votre pièce au sein de votre flux audio. Cela se produit généralement dans des espaces sans isolation acoustique. Cela est particulièrement utile pour les utilisateurs travaillant ou étudiant à domicile dans des pièces plus petites sans isolation adéquate.

La super-résolution vidéo RTX améliore la résolution des vidéos issues de la webcam et des fichiers vidéo jusqu’à la 4K. En mode live, choisissez entre les modes Performance et Qualité. Seules les résolutions supérieures à la source sont proposées. Exige une carte graphique GeForce RTX 3060 ou supérieure.

La génération d’images RTX Video augmente la fréquence d’images de la webcam jusqu’à 60 i/s en mode direct et multiplie par 2 ou par 4 la fréquence d’images des vidéos enregistrées. En mode live, choisissez entre les modes Performance et Équilibré. Exige un GPU de la série GeForce RTX 40 ou supérieur.

Studio Voice propose quatre profils de microphone — Default, Bright, Full et Warm — qui ajustent le caractère tonal de votre voix. Le profil Default n'applique aucune coloration supplémentaire. Le profil Bright est net et précis. Le profil Full est riche et profond. Le profil Warm est doux, lisse et axé sur les basses.

Le mode Fichiers vous permet d'appliquer les effets audio et vidéo de NVIDIA Broadcast pris en charge à des fichiers multimédias enregistrés. Les formats pris en charge sont les formats standard .mp4, .m4a, .mp3 et .wav. Il prend en charge les codecs .h264 (8 bits) et AAC ainsi que jusqu'à 2 canaux audio. Ajoutez des fichiers, affichez un aperçu de l'entrée, choisissez des effets et traitez-les via une file d'attente. Puisqu'il s'agit d'un mode hors ligne, certains effets peuvent prendre plus de temps pour offrir une qualité supérieure que le mode en temps réel.

Actuellement, File Processor ne prend pas en charge le format MP4 fragmenté. Utilisez ou convertissez les fichiers mp4 au format MPEG-4 standard avant de les utiliser dans le File Processor.

NVIDIA Broadcast comprend un serveur MCP (Model Context Protocol) local qui permet aux agents d'IA compatibles sur le même ordinateur de lire et modifier les paramètres pris en charge. Trouvez les informations de connexion sous Paramètres → Ressources de l'agent d'IA. La connexion est locale uniquement ; aucun accès externe n'est possible.

Les agents peuvent utiliser les fonctionnalités suivantes dans NVIDIA Broadcast via le serveur MCP :

  • Activation et désactivation des effets audio et vidéo
  • Processeur de fichiers
  • Sélection de la caméra, du micro et des haut-parleurs

Les fonctionnalités suivantes ne sont pas prises en charge : paramètres de la page de configuration, capacités de test et d’aperçu pour les effets caméra et audio

NVIDIA Broadcast fonctionne avec la plupart des micros, haut-parleurs, casques et webcams pour PC. Les modèles les plus récents incluent des produits de constructeurs renommés tels que Logitech, ElGato, AverMedia, Razer, Asus, HyperX, SteelSeries, Rode et Bose.

Assurez-vous que, si votre appareil possède une fonctionnalité similaire à celle de NVIDIA Broadcast (exemple : la suppression de bruit), cette dernière est bien désactivée. Ainsi, ce même effet ne sera pas appliqué deux fois.

NVIDIA Broadcast est compatible avec une grande variété d'applications de diffusion, de visioconférence et de chat vocal. Ces applications incluent OBS Studio, Streamlabs, Xsplit Broadcaster, HuYa, DouYu, Bilibili, Discord, TeamSpeak, Skype, Zoom, Webex, Microsoft Teams, Slack, Google Meet et bien d'autres.

NVIDIA Broadcast prend en charge les raccourcis clavier. Les utilisateurs peuvent également utiliser l'application Elgato Stream Deck pour activer ou désactiver les effets de NVIDIA Broadcast. Si vous souhaitez découvrir le plug-in Elgato Stream Deck, rejoignez l'Elgato Marketplace en cliquant sur ce lien.

NVIDIA Broadcast crée une caméra, un microphone ou un haut-parleur Windows virtuels sur votre PC, de sorte qu'il semble que les applications de chat vidéo ou vocal soient utilisées comme un appareil physique.  Il vous suffit d'activer les fonctionnalités voulues à partir de l'application NVIDIA Broadcast, puis de sélectionner l'appareil NVIDIA Broadcast à partir de votre application de diffusion vidéo ou de chat vocal.

  • GPU : NVIDIA GeForce RTX 2060, Quadro RTX 3000, TITAN RTX ou plus
  • RAM : 8 Go de RAM
  • Système d’exploitation : Windows 10 64 bits, Windows 11 64 bits, Windows sur ARM
  • Pilote : Windows 10 : 572.61 ou version ultérieure. Windows sur Arm : 617.42 ou supérieur
  • CPU : Intel Core i5 8600, AMD Ryzen R5 2600 ou plus
  • Connectivité Internet requise pour l’installation

La fonctionnalité Virtual Key Light, Studio Voice et la super-résolution vidéo RTX (beta) nécessitent un GPU GeForce RTX 3060 ou supérieur. La génération d'images vidéo RTX (beta) nécessite un GPU GeForce RTX série 40 ou plus récent.

Lors de la procédure d'installation, NVIDIA Broadcast va télécharger les derniers modèles d'IA pour votre GPU. Vous disposerez ainsi de la dernière version du programme et réduirez la taille du téléchargement en téléchargeant uniquement les modèles nécessaires à votre GPU.

Non. L'application NVIDIA Broadcast utilise les cœurs Tensor des GPU NVIDIA RTX pour accélérer les calculs d'IA, de manière à vous permettre de jouer, de livestreamer et d'exécuter des réseaux d'IA en même temps.

Pour ceux d'entre vous qui voudraient tester les capacités de réduction du bruit basées sur l'IA mais ne sont pas encore prêts à upgrader leur machine avec un GPU RTX, nous proposons un patch pour RTX Voice compatible avec les GPU NVIDIA GeForce GTX. Sachez toutefois que les résultats peuvent varier avec des GPU plus anciens.

Vous pouvez télécharger NVIDIA Broadcast ici.

NVIDIA Broadcast propose des capacités de suppression du bruit basées, entre autres, sur la beta communautaire de RTX Voice. L’application inclut également des fonctionnalités d’arrière-plan virtuel et de recadrage automatique optimisées par l’IA.

L’impact sur les performances dépend du GPU, du jeu, de la résolution et de la fréquence d’images de la webcam, ainsi que du nombre d’effets utilisés pendant la diffusion. En général, nous avons mesuré que l'impact des effets sur les performances était compris entre 5 % et 10 % sur une GeForce RTX 5090.

Studio Voice est conçu pour améliorer la qualité de votre micro et est destiné à la diffusion en direct non-gaming (simple conversation), aux conférences vidéo ou à la création de contenu. Il utilise une plus grande partie de votre GPU, donc nous ne vous recommandons pas de l'utiliser pendant que vous jouez ou exécutez une application gourmande en ressources GPU.

Si vous rencontrez des problèmes de performances, nous vous recommandons d'éteindre les effets que vous n'utilisez pas et de réduire la résolution de l'appareil photo et/ou la fréquence d'images.

Dans l'application NVIDIA Broadcast, cliquez sur le bouton "Commentaires" dans le coin supérieur gauche.

Vous pouvez obtenir de l'assistance ici : broadcast.nvidia.com/support

Vous pouvez nous aider à entraîner le réseau d'IA à l'adresse suivante : broadcast.nvidia.com/feedback

Les développeurs intéressés par l'intégration de la technologie de NVIDIA Broadcast à leurs applications peuvent accéder aux kits de développement de NVIDIA AI for Media sur notre site dédié aux développeurs : https://developer.nvidia.com/topics/ai/generative-ai/ai-for-media.

GeForce RTX 4080, 5070 ou version ultérieure.

L'effet de Studio Voice est adapté aux cas d'utilisation autres que les jeux vidéo (chats, livestreams, visioconférences et création de contenu).