Wie Sie mit NVIDIA Broadcast Ihr Streaming mit KI verbessern können


Web
2024-04-13T20:05:14Z

Was ist NVIDIA Broadcast?

NVIDIA Broadcast ist eine Software von NVIDIA, die die Qualität Ihrer Video- und Audiostreams verbessern soll. Laut NVIDIA nutzt die Software KI, die von einem RTX-Grafikprozessor unterstützt wird, um Hintergrundgeräusche zu reduzieren, Videorauschen zu verringern und den Hintergrund während des Streamings zu ändern. Es kann auch automatisch Ihr Gesicht in einem Stream verfolgen oder den Anschein erwecken, dass Ihre Augen auf den Bildschirm fokussiert bleiben, auch wenn Sie eigentlich woanders hinschauen.

Verwenden Sie NVIDIA Broadcast zur Reduzierung von Hintergrundgeräuschen

NVIDIA Broadcast kann dabei helfen, störende Hintergrundgeräusche oder Echos aus dem Mikrofonton zu entfernen.

Um die Funktion zu aktivieren, müssen Sie zunächst die NVIDIA Broadcast-App herunterladen und installieren. Standardmäßig ist die Rauschunterdrückung nach der Installation des Programms aktiviert. Wenn dies jedoch nicht der Fall ist oder Sie die Einstellungen anpassen möchten, gehen Sie wie folgt vor.

Doppelklicken Sie auf das Symbol in der Taskleiste, um das Programm zu öffnen.

Double-click the NVIDIA Broadcast icon on the taskbar.

Vergewissern Sie sich, dass Ihr Mikrofon ausgewählt ist, und klicken Sie dann auf "Effekt hinzufügen" Wenn Sie nicht über mehrere Audioeingangsgeräte verfügen, ist die Standardoption ausreichend.

Click the drop-down menu, select your physical audio device, then click 'Add Effect.'

Klicken Sie auf das Dropdown-Feld, wählen Sie "Rauschunterdrückung" und klicken Sie dann auf die Position "Ein".

The available filters in the Effects area.

Wenn Sie eine Echounterdrückung hinzufügen möchten, klicken Sie einfach erneut auf "Effekt hinzufügen" und wählen Sie "Echounterdrückung"

Wenn Sie die Rauschunterdrückungsfilter tatsächlich verwenden möchten, können Sie nicht Ihr physisches Mikrofon als Eingabegerät auswählen, sondern müssen stattdessen "NVIDIA Broadcast" wählen. Hier ein Beispiel für eine mögliche Anzeige:

Microphone NVIDIA Broadcast in Google Meet

Wie gut ist die Rauschunterdrückung? Ziemlich gut. In der Vergangenheit war die Software zur Rauschunterdrückung immer ein ziemlicher Reinfall. Manchmal funktionierte sie gut, ein anderes Mal verwandelte sie Ihre Stimme in ein schwer verständliches Durcheinander, da sie versuchte, zwischen Ihrer Stimme und Hintergrundgeräuschen zu unterscheiden, was ihr nicht gelang.

Ich habe die Software etwa eine Woche lang mit der Krisp Noise Suppression von Discord verglichen und festgestellt, dass die Leistung vergleichbar ist. Der Hauptvorteil ist natürlich, dass man NVIDIA Broadcast in jeder App verwenden kann.

Es ist nicht nur auf Audio beschränkt. Es gibt auch Tools zur Verbesserung der Videoqualität.

Hinzufügen eines virtuellen Hintergrunds

Mit NVIDIA Broadcast können Sie auch virtuelle Hintergründe einfügen. Es gibt drei Hauptoptionen:

  • Hintergrundunschärfe: Verwischt den Bereich hinter dem Hauptmotiv.
  • Hintergrund-Entfernen: Entfernt alles hinter dem Hauptmotiv und ersetzt es durch reines Schwarz.
  • Hintergrund ersetzen: Entfernt alles hinter dem Motiv und ersetzt es durch ein Bild oder Video.

Um eine dieser Funktionen zu aktivieren, doppelklicken Sie zunächst auf das NVIDIA Broadcast-Symbol in der Taskleiste.

Double-click the NVIDIA Broadcast icon on the taskbar.

Wechseln Sie nach dem Öffnen der App zur Registerkarte "Kamera" und wählen Sie dann eine der drei Optionen aus dem Dropdown-Menü.

Click the 'Camera' tab, then click the drop-down menu and select one of the three options. Click the toggle to enable it.

Ich habe die Hintergrundersetzung mit dem NVIDIA-Standardbild als Hintergrund verwendet. Sie können auf die Schaltfläche "Bild oder Video auswählen" klicken, um ein anderes Bild zu verwenden. Wenn Sie Ihren Ausschnitt über einen Stream legen möchten, verwenden Sie stattdessen "Hintergrund entfernen".

Ich habe es mit verschiedenen Beleuchtungseinstellungen ausprobiert und fand, dass es im Qualitätsmodus recht gut funktioniert. Es gibt einen leichten Defekt auf der linken Seite des Kopfes, der bei mittlerer bis schwacher Beleuchtung auffällt. Trotzdem ist es immer noch ziemlich beeindruckend, wenn man bedenkt, dass sich hinter ihm ein Computerbildschirm, ein Satz Autoschlüssel und eine Fernbedienung befinden.

A Star Wars bobblehead with the background replacement tool active.

Wenn man neue Objekte hinter der Person bewegt, wird ein Teil des Bildes durchgeschnitten, aber sobald es sich nicht mehr bewegt, verschwindet es, wie es sollte. Es gab eine Ausnahme: ein buntes ecuadorianisches Lama.

Our Star Wars bobblehead with a colorful Llama behind him.

Aus irgendeinem Grund, unabhängig von den Lichtverhältnissen, dem Abstand zwischen den beiden Objekten oder der Ausrichtung, zeigte die KI das Lama sehr gerne. Das führte auch dazu, dass die Software einen Teil seines Kopfes ausschnitt.

Der Leistungsmodus verschlimmerte all diese Probleme noch erheblich. Sie sollten ihn vermeiden, es sei denn, Sie haben ernsthafte Leistungsprobleme mit Quality.

Abgesehen davon funktionierte er jedoch recht zuverlässig.

Rauschen aus dem Video entfernen

NVIDIA Broadcast kann auch das Rauschen in Ihrem Video reduzieren. Dies ist besonders hilfreich, wenn Sie keine optimalen Lichtverhältnisse haben oder Ihre Webcam schon etwas älter ist. Um die Rauschunterdrückung zu aktivieren, öffnen Sie NVIDIA Broadcast und klicken Sie dann auf "Effekt hinzufügen"

Click 'Add Effect' in the Camera tab.

Klicken Sie auf das Dropdown-Menü, wählen Sie "Video-Rauschunterdrückung" und klicken Sie dann auf den Schalter.

Click the drop-down menu, select 'Video Noise Removal,' then hit the toggle.

Hier ein kurzes Beispiel, wie es funktioniert. Das linke Bild ist die reguläre Ausgabe der Webcam, das rechte ist ein Moment später mit aktivierter Rauschunterdrückung.

The noise reduction is disabled on the left, noise reduction enabled on the right.

Wie alle Programme zur Rauschunterdrückung führt auch dieses zu einer sehr glatten Oberfläche. Sie können jedoch jederzeit zwischen starker und schwacher Rauschunterdrückung umschalten. Schwach ist am besten geeignet, wenn Ihre Webcam nur wenig Rauschen aufweist. Sie sollten Stark nur dann verwenden, wenn es absolut notwendig ist, da es die Bildqualität etwas verringert.

Andere Tools in NVIDIA Broadcast

NVIDIA Broadcast verfügt über einige weitere Tools, die jedoch eher für Nischenanwendungen gedacht sind.

  • Automatischer Rahmen: Schneidet den Videorahmen automatisch zu, um Ihrem Gesicht zu folgen.
  • Vignette: Dunkelt den Rand des Videobildes leicht ab.
  • Augenkontakt: Verwendet KI, um den Eindruck zu erwecken, dass Sie immer in die Kamera schauen

Von diesen Möglichkeiten ist der Augenkontakt am interessantesten, aber er ist auch unglaublich unheimlich. Außerdem funktioniert er nicht perfekt. Manchmal bewegt man den Kopf, und die KI-generierten Augen verschwinden, und die Augen scheinen aggressiv in eine andere Richtung zu blicken. Es könnte jedoch ein lustiger Effekt sein, den man beim Streaming des Spiels einsetzen kann .