Im Zuge der TwitchCon 2019 präsentiert NVIDIA die NVIDIA RTX Broadcast Engine, eine Sammlung von neuen SDKs, die KI-basierte Greensceen-, verschiedene Augmented-Reality- sowie Stilfilter beinhalten. NVIDIA arbeitete hierfür mit führenden Streaming-App-Entwicklern zusammen, um die NVIDIA RTX Broadcast Engine in ihre Software und Plugins zu integrieren.
Die SDKs beinhalten:
RTX Greenscreen entfernt in Echtzeit den Hintergrund des Webcam-Feeds. Gesicht und Körper bleiben so im Stream stets sichtbar. Der KI-basierte RTX Greenscreen versteht, wo der Körper des Streamers endet und der Hintergrund beginnt. So genießen die Streamer alle Vorteile eines Greenscreens, ohne selbst einen kaufen zu müssen.
RTX AR erkennt Gesichter und sogar einzelne Gesichtsmerkmale wie Augen und Mund. Darüber hinaus kann es sogar die Oberfläche von Gesichtern nachmodellieren, so das lustige AR-Effekte entstehen. Beispielsweise das “Projizieren” von 3D-Inhalten auf dem Gesicht oder das Steuern von 3D-Modellen mit dem Gesicht.
RTX Style Filters: Dieses SDK nutzt Style Transfer, eine KI-Technologie mit der das Bild einer Webcam im Stil eines anderen Bildes überschrieben wird. Durch Hotkeys können Streamer ihrem Videofeed den Look und Stil ihres Lieblingsbildes verpassen.
