NVIDIA Broadcast-app: installatiehandleiding

• Over NVIDIA Broadcast
• Vereisten
• Snelstartgids
• NVIDIA Broadcast testen
• App-configuratie

NVIDIA Broadcast transformeert elke ruimte in een thuisstudio en upgradet standaard webcams en microfoons naar premium smart-apparaten door de kracht van AI. Verbeter de video- en audiokwaliteit van je livestream met AI-mogelijkheden zoals microfoonruisverwijdering en kamerecho-onderdrukking, virtuele achtergrond, auto-frame en videoruisverwijdering. Met de speciale AI-processors genaamd Tensor Cores op NVIDIA RTX GPU's kunnen de AI-netwerken effecten van hoge kwaliteit in realtime uitvoeren.

• Download https://www.nvidia.com/nl-nl/geforce/broadcasting/broadcast-app/
• Veelgestelde vragen: https://www.nvidia.com/nl-nl/geforce/broadcasting/broadcast-app/faq/
• Help ons de AI-netwerken te trainen: https://www.nvidia.com/en-us/geforce/forums/broadcasting/18/

NVIDIA Broadcast maakt virtuele apparaten op je Windows-pc die een AI-effect toepassen op de uitvoer van je microfoon, luidspreker of webcam. Zo kan deze op verschillende manieren worden verbeterd. Dit virtuele apparaat (ook wel NVIDIA Broadcast genoemd) is heel handig voor je apps voor livestreaming of videovergaderingen.

1. Download de app.
2. Installeer de app. Tijdens de installatie worden de benodigde bestanden voor je systeem door de app gedownload. De download vereist ~3 GB extra opslagruimte, dus zorg ervoor dat je een goede connectiviteit en genoeg opslagruimte hebt.

1. NVIDIA Broadcast installeren:

a. Open de NVIDIA Broadcast-app.

b. Ga naar elk apparaat en selecteer bovenaan het invoerapparaat.

c. Selecteer het effect dat je wilt toepassen.

i. Je kunt meerdere effecten combineren.

ii. We raden aan om alleen de effecten in te schakelen die je nodig hebt om te voorkomen dat je onnodige GPU-bronnen verbruikt.

iii. Om het GPU-gebruik te controleren voor de effecten die je hebt ingeschakeld, schakel je de GPU-gebruiksindicator in via 'Instellingen'.

d. Voor sommige effecten kun je de instellingen van het effect configureren met de schuifregelaars of opties eronder

2. Controleer je Windows-geluidsinstellingen

a. Ga naar Windows-instellingen > Systeem > Geluid en zorg ervoor dat je headset of luidsprekers zijn ingesteld als het uitvoerapparaat. Je wil niet dat NVIDIA Broadcast Speakers de standaard zijn, omdat dan alle systeemgeluiden uitgefilterd zouden worden.

b. Je kunt de NVIDIA Broadcast Microfoon selecteren als input. Zo hoef je dit niet afzonderlijk per app te configureren. Zorg in dit geval dat je je daadwerkelijke microfoon selecteert in de NVIDIA Broadcast-app.

3. Configureer je apps voor livestreaming of videoconferentie:

a. Open de app die je wilt gebruiken

b. Ga naar Instellingen en ga naar de gedeelten Audio en video

c. Selecteer de NVIDIA Broadcast-apparaten:

i. Microfoon (NVIDIA Broadcast)

ii. Luidspreker (NVIDIA Broadcast)

iii. Camera (NVIDIA Broadcast)

Als je meer informatie wilt over het configureren van een bepaalde app klik je hier.

Je bent klaar om te beginnen!

• Over multi-effecten: je kunt AI-effecten per apparaat combineren.
  • Als je meer dan één effect uitvoert, wordt het GPU-gebruik van de app verhoogd.
  • Niet alle effecten kunnen worden gecombineerd. Studio Voice kan bijvoorbeeld niet worden gecombineerd met de onderdrukking van de achtergrondruis van de microfoon.
• Vermijd problemen met filters van derden: Toepassingen kunnen soms effecten toepassen, zoals ruisverwijdering, vergelijkbaar met die van NVIDIA Broadcast. Als je een effect twee keer toepast, werkt het meestal niet goed. We raden aan om dergelijke effecten uit te schakelen in je app en stuurprogramma's.
• Sneltoetsen: je kunt bepalen wanneer camera-, microfoon- en luidsprekereffecten worden in- of uitgeschakeld door sneltoetsen toe te wijzen. Ga naar Instellingen om sneltoetsen in te schakelen en hun toetsenbordtoewijzing te bewerken. Elke keer dat je op een sneltoets drukt, wordt de laatste selectie in- of uitgeschakeld. Optioneel kunnen Elgato Stream Deck-gebruikers hun apparaten gebruiken om de toetsenbordsneltoetsen te bedienen. Download en installeer de plug-in van de Elgato Marketplace hier en volg de instructies.
• Resolutie wijzigen. Om de beeldkwaliteit van de camera aan te passen, doe je dat in NVIDIA Broadcast. Laat in je app voor streaming/videoconferenties de instellingen op de standaardwaarden staan of laat ze overeenkomen met je NVIDIA Broadcast-instellingen. Als je je webcam-beeldkwaliteit in NVIDIA Broadcast wijzigt, moet je de camera in je app opnieuw laden (zet deze uit en weer aan, en pas de beeldkwaliteit aan als deze niet is ingesteld op Automatisch).
• Als je de microfoon/luidsprekers vaak aansluit/ontkoppelt: als je je microfoon of luidsprekers vaak wijzigt (bijv. om ze aan te sluiten en los te koppelen), kun je (standaardapparaat) selecteren als je invoer in NVIDIA Broadcast. Zo wordt elke microfoon/luidspreker die door Windows als standaard wordt herkend als invoer gebruikt en hoef je deze niet elke keer te configureren.
• Stel NVIDIA Broadcast in als het standaardapparaat in Windows-geluidsinstellingen: je kunt NVIDIA Broadcast instellen als je standaardmicrofoon in Windows, zodat je deze niet voor elke toepassing hoeft te wijzigen. Als je ervoor kiest om dit te doen, zorg er dan voor dat je in NVIDIA Broadcast je echte microfoon selecteert. Doe dit niet voor luidsprekers, omdat je anders alle audio die via je apparaat binnenkomt, zoals video's en muziek, zou gaan filteren.
• Brede display-modus: NVIDIA Broadcast ondersteunt nu twee maten - een verticaal georiënteerd display, ideaal voor gebruikers die een app met een kleine footprint willen voor gemakkelijke toegang, of een bredere display-modus voor gemakkelijkere navigatie en grotere video-previews.
  
  • Om de app-weergave uit te breiden of te verkleinen, klik je op de knop Uitbreiden/samenvouwen op de bovenste vensterbalk.

NVIDIA Broadcast heeft een ingebouwde testfunctie in de app:

• Als je je microfoon wilt testen, neem je jezelf op terwijl je spreekt met een achtergrondgeluid. Je kunt nu het bestand afspelen en het effect in- en uitschakelen, of de sterkte aanpassen, om te zien hoe het effect de audio verandert.
• Om je luidsprekers te testen, hebben we verschillende opnames toegevoegd waarnaar je kunt luisteren terwijl je het effect aan- en uitschakelt om te zien wat er verandert. Je kunt ook de sterkte van het effect aanpassen.
• Als je je webcam wilt testen, gebruik je het voorbeeldvenster.
  • Het voorbeeldvenster heeft een nieuwe 'voor/na'-functie. Hiermee kun je de onbewerkte uitvoer van de camera vergelijken met de uitvoer van NVIDIA Broadcast, waarbij AI-effecten zijn toegepast. Klik op het side-by-side-pictogram in het camera-voorbeeldvenster om in te schakelen

• Opmerking: zorg ervoor dat je deze functie uitschakelt voordat je uitzendt of deelneemt aan videogesprekken, anders ziet je publiek ook de zij-aan-zij-video.

Met de Bestandsprocessor kun je ondersteunde NVIDIA Broadcast-audio- en video-effecten toepassen op opgenomen mediabestanden, dezelfde AI-technologie die wordt gebruikt in de livemodus, offline toegepast. Sommige effecten worden uitgevoerd in een hogere kwaliteit dan in realtime-modus bij het verwerken van bestanden, wat de best mogelijke output biedt.
Ondersteunde indelingen: .mp4, .m4a, .mp3, .wav Ondersteunde codecs: H.264 (8-bit), AAC. Ondersteunde audiokanalen: 2

Hoe te gebruiken:

1. Open NVIDIA Broadcast en ga naar het tabblad Bestanden.
2. Voeg een of meer bestanden toe door te bladeren, een map toe te voegen of door te slepen en neer te zetten.
3. Kies compatibele audio- en video-effecten.
4. Selecteer een uitvoerlocatie.
5. Verwerk het bestand.
6. Volg de voortgang. Wanneer dit voltooid is, bekijk of open het uitvoerbestand.

Opmerking: Live-verwerking en bestandsverwerking kunnen niet tegelijkertijd actief zijn. Als je bestandsverwerking begint terwijl live-effecten actief zijn, vraagt NVIDIA Broadcast je om de overschakeling te bevestigen. Je opgeslagen live-setup keert terug wanneer bestandsverwerking niet langer actief is.

NVIDIA Broadcast bevat een lokale MCP-server (Model Context Protocol) waarmee een compatibele AI-agent Broadcast kan besturen met behulp van verzoeken in natuurlijke taal. Het wordt uitgevoerd op dezelfde Windows-pc als Broadcast en heeft geen API-sleutel nodig.

Dit betekent dat je AI-assistent je huidige effecten kan in- en uitschakelen, van apparaten kan wisselen en zelfs bestanden kan verwerken, allemaal door middel van een eenvoudig gesprek.

Verbind je agent:

1. Start NVIDIA Broadcast
2. Open instellingen > AI-agent-bronnen

3. Kopieer de verbindingsinformatie voor het gewenste transport:

Optie A -  Streambare HTTP (aanbevolen)

Kopieer de server-URL die wordt weergegeven onder MCP-server. Voeg in de MCP-instellingen van je agent een aangepaste server toe:

Kopieer altijd de URL van de app—de poort kan tussen sessies veranderen.
NVIDIA Broadcast moet worden uitgevoerd.

Optie B - Stdio (voor clients die Streamable HTTP niet ondersteunen)
Kopieer de stdio-opdracht die wordt weergegeven onder MCP-server. Registreer in de MCP-instellingen van je agent een stdio-server:

{
 "command": "C:\Program Files\\NVIDIA Corporation\\NVIDIA Broadcast\\NvBroadcastMCP.exe"
}

De stdio-brug leest JSON-RPC van stdin en schrijft antwoorden naar stdout. NVIDIA Broadcast moet worden uitgevoerd.

4. Sla de server op of maak verbinding. Je klant kan je vragen om verzoeken goed te keuren die effecten, apparaten of bestanden wijzigen.

Voeg de NVIDIA Broadcast-vaardigheid toe

1. Selecteer in Instellingen > AI-agent-bronnen Openen naast Vaardigheden.
2. Voeg de nvidia-broadcast-map toe met de local-skill-workflow van je agent.

De MCP-verbinding werkt zonder vaardigheid, maar de vaardigheid helpt de agent om de juiste tools en parameters te selecteren.

Wat de MCP-server kan doen:

• Effecten: beschikbare camera-, microfoon- en luidsprekereffecten lezen, uitleggen, inschakelen, uitschakelen en afstemmen. De exacte effecten zijn afhankelijk van de geïnstalleerde build en ondersteunde GPU.
• Apparaten: apparaten weergeven en schakelen tussen camera's, microfoons en luidsprekers; cameramodi bekijken; en de beeldkwaliteit of framesnelheid van de camera wijzigen.
• Bestanden: pas ondersteunde camera- en microfooneffecten toe op lokale .mp4-, .m4a-, .mp3- en .wav-bestanden en rapporteer vervolgens de verwerkingsstatus en uitvoerlocatie.

Probeer deze prompts:

• "Welke NVIDIA Broadcast-effecten zijn momenteel ingeschakeld?"
• "Schakel ruisverwijdering voor de microfoon in en vervaag mijn achtergrond tot 70%."
• "Leg de beschikbare microfooneffecten uit en beveel er één aan voor een videogesprek."
• "Maak een lijst van mijn camera's en schakel vervolgens over <camera name>naar 1080p en 60 fps."
• "Verwerk C:\path\to\my\videos\clip.mp4 met videoruisverwijdering en Studio Voice."

Als het geen verbinding maakt:

• Bevestig dat NVIDIA Broadcast wordt uitgevoerd en de initialisatie is voltooid, open vervolgens Instellingen opnieuw, kopieer de weergegeven URL opnieuw en maak opnieuw verbinding.
• Als Broadcast net is begonnen, wacht je tot 60 seconden totdat de MCP-server klaar is.
• Als de klant een goedkeurings- of toestemmingsverzoek indient, beoordeel en keur het dan goed om door te gaan.

RTX Video Super-beeldkwaliteit en Frame Generation, evenals Video-ruisverwijdering, zijn momenteel in bèta. Deel je feedback om ons te helpen blijven verbeteren.

• Als je problemen ervaart, kun je deze hier melden.
• Help ons het AI-netwerk te trainen

• OBS Studio
• Discord
• Microsoft Teams
• Zoom
• Streamlabs
• XSplit Broadcaster
• WebEx
• Slack
• Google Chrome

1. Ga naar Instellingen > Audio.

2. Selecteer NVIDIA Broadcast als je apparaat: Apparaten > Mic/Auxiliary Audio, selecteer Microfoon (NVIDIA Broadcast).

3. Om de NVIDIA Broadcast-camera te selecteren, voeg je een video-opnamebron toe aan je scène en selecteer Camera (NVIDIA Broadcast). Laat alle standaardinstellingen staan. Om de beeldkwaliteit van je camera te wijzigen, moet je dit doen in NVIDIA Broadcast.

1. Ga naar Instellingen (tandwieltje) en selecteer vervolgens Stem en video.

2. Selecteer de NVIDIA Broadcast-microfoon, -luidspreker en -camera als je invoer- en uitvoerapparaten, en camera.

3. Zorg voor de beste kwaliteit dat je alle ruisonderdrukkingseffecten in Discord uitschakelt.

1. Klik op Oproepen in het linkermenu

2. Ga naar Apparaten en selecteer onder Audio-apparaten Aangepaste installatie..

3. Configureer NVIDIA Broadcast als je apparaten.

4. Zorg ervoor dat je alle ruisverwijderingseffecten uitschakelt voor de beste kwaliteit.

1. Als je de bureaubladtoepassing wilt configureren, ga je naar Instellingen > Audio-instellingen.

2. Selecteer NVIDIA Broadcast als je luidspreker- en microfoonapparaat.

3. Ga naar Video en selecteer Camera (NVIDIA Broadcast).

4. Zorg ervoor dat je ruisonderdrukkingseffecten uitschakelt of verlaagt voor de beste kwaliteit.

Je kunt je apparaten ook tijdens een vergadering configureren:

1. Klik op het kleine pijltje in de optie linksonder.

2. Selecteer de microfoon en luidsprekers van NVIDIA Broadcast als je apparaten.

3. Herhaal dezelfde actie in de optie Video (tweede linksonder) om Camera (NVIDIA Broadcast) te selecteren.

1. Ga naar Instellingen.

2. Ga naar Audio en selecteer onder Mic/hulpapparaat 1 Microfoon (NVIDIA Broadcast).

3. Om de NVIDIA Broadcast-camera te selecteren, voeg je een video-opnamebron toe aan je scène en selecteer Camera (NVIDIA Broadcast). Laat alle standaardinstellingen staan. Als je de resolutie van je camera wilt aanpassen, moet je dit doen met NVIDIA Broadcast.

1. Selecteer onder Bestand->Instellingen het tabblad 'Audio'

2. Selecteer NVIDIA Broadcast als je apparaat:

a. Selecteer onder Audiovoorbeeld: Luidsprekers (NVIDIA Broadcast).

b. Selecteer onder Microfoon: Microfoon (NVIDIA Broadcast).

3. Om de NVIDIA Broadcast-camera te selecteren, voeg je een apparaatbron toe aan je scène en selecteer Camera (NVIDIA Broadcast).

Je kunt WebEx op twee manieren configureren:

1. Wanneer je verbinding maakt met de WebEx-vergadering, wordt je gevraagd hoe je verbinding wilt maken met de vergadering. Selecteer Bellen via computer en selecteer NVIDIA Broadcast voor je apparaten.

2. Als je al verbonden bent, kun je je instellingen wijzigen door te gaan naar Audio > Audio- en videoverbindingen.

a. Selecteer vervolgens Instellingen wijzigen.

b. Configureer de apparaatinstellingen om NVIDIA Broadcast te gebruiken.

Je kunt het beste Volume automatisch aanpassen uitschakelen en het volume handmatig instellen.

1. Klik op je pictogram linksonder en vervolgens op Voorkeuren.

2. Selecteer audio en video

3. Configureer vervolgens NVIDIA Broadcast als je apparaten.

1. Ga naar Instellingen (klik op de drie stippen rechtsboven en vervolgens Instellingen).
2. Klik op Site-instellingen > Microfoon.
3. Selecteer Microfoon (NVIDIA Broadcast).
4. Ga terug naar Site-instellingen en navigeer naar Site-instellingen > Site-instellingen > Camera.
5. Selecteer Camera (NVIDIA Broadcast).