De Evolutie van Streaming: De Toekomst van Creatie met de Intelligent Streaming Agent

De wereld van streaming verandert razendsnel, en met deze veranderingen evolueren ook de hulpmiddelen die makers nodig hebben om bij te blijven. Tijdens Logitech G PLAY 2025 heeft Streamlabs, in samenwerking met NVIDIA en InWorld, de Intelligent Streaming Agent gepresenteerd: een assistent aangedreven door AI en RTX-technologieën die live-streamers ondersteunt als co-host, producent en technische ondersteuning.

Van Multitasking Streamer naar Slimme Assistent

Voorheen moest een content creator gelijktijdig optreden als speler, commentator, regisseur en moderator, terwijl hij ook technische problemen aanpakte. De nieuwe Streaming Agent heeft als doel dit model te veranderen, door te functioneren als een real-time medewerker die in staat is om:

• Co-hosting te bieden met een 3D-geanimeerde avatar, geanimeerd door NVIDIA ACE Audio2Face en geoptimaliseerd met DLSS. Deze avatar kan interageren met de chat en de conversatie gaande houden wanneer het publiek stil is.

• Productie uit te voeren door scènes te wisselen, geluidseffecten of clips te activeren en vooraf gedefinieerde signalen uit te voeren, allemaal met instelbare triggers die de streamer kan personaliseren.

• Technische ondersteuning te bieden door vragen te beantwoorden over Streamlabs en te helpen bij het oplossen van fouten zonder dat de maker de uitzending hoeft te onderbreken.

“Met de integratie van ACE Audio2Face in Streamlabs kunnen makers realistische avatars en realtime intelligentie gebruiken voor hun uitzendingen, waardoor meer aantrekkelijke ervaringen ontstaan, rechtstreeks vanaf hun pc met NVIDIA GeForce RTX AI,” aldus Jason Paul, VP technologie van het GeForce-platform bij NVIDIA.

Professionele Streaming Voor Iedereen

Enkele jaren geleden vereiste een streaming setup twee computers, DSLR-camera’s en XLR-microfoons. NVIDIA heeft gewerkt aan de democratisering van deze activiteit met verschillende innovaties:

• Efficiënte codering: De encoder van NVIDIA maakt hoge kwaliteit streamen mogelijk met slechts één pc uitgerust met een RTX GPU.

• Verbeterde audio en video: Dankzij NVIDIA Broadcast bieden zelfs betaalbare microfoons en webcams professioneel geluid en beeld.

• Geoptimaliseerde distributie: Functies zoals Enhanced Broadcast van Twitch en OBS maken het voor zelfs kleine kanalen gemakkelijk om in meerdere kwaliteiten uit te zenden zonder afhankelijk te zijn van de infrastructuur van het platform.

De nieuwe assistent van Streamlabs maakt gebruik van deze vooruitgangen en voegt een laag van agentische AI toe, waardoor zelfs onervaren streamers dynamische uitzendingen kunnen produceren met reactiviteit, op maat gemaakte avatars en geautomatiseerde productie-ondersteuning.

Real-time Herkenning en Versnelde Vision Modellen

Een van de meest opmerkelijke mogelijkheden van de Intelligent Streaming Agent is het gebruik van real-time vision modellen, versneld door NVIDIA RTX, die in staat zijn gebeurtenissen in games, zoals eliminaties en kritieke gezondheidspunten, te detecteren. Deze informatie stelt de agent in staat om effecten of scèneveranderingen automatisch te activeren, wat zorgt voor vloeiendheid en dynamiek zonder handmatige interventie.

Alle verwerking vindt lokaal plaats op de RTX GPU, wat zorgt voor lage latentie en vermijdt afhankelijkheid van de cloud, wat cruciaal is voor live-uitzendingen.

Creatieve Ecosysteem Voorbij Streaming

De presentatie van de Intelligent Streaming Agent past in een breder kader: NVIDIA stimuleert een ecosysteem van generatieve AI en creatietools voor pc’s met RTX. Recentelijk zijn enkele opvallende innovaties geïntroduceerd:

• ComfyUI v3.57: Tot wel 40% prestatieverbeteringen voor generatieve modellen dankzij RTX, met ondersteuning voor nieuwe modellen zoals Wan 2.2, Qwen-Image, en Hunyuan3D 2.1 (3D-activa generatie).

• TensorRT en NIM microservices: Geoptimaliseerde modellen zoals Stable Diffusion 3.5 draaien tot drie keer sneller met 50% minder VRAM op RTX.

• De geüpdatete RTX Remix: Een nieuw deeltjesysteem met path tracing dat modders in staat stelt klassieke games nieuw leven in te blazen met realistische en interactieve visuele effecten.

Deze tools, gecombineerd met de Streaming Agent, bevestigen de GPU RTX als het centrum van digitale creatie, van live streaming tot 3D-contentproductie en geavanceerde beeld- en videobewerking.

Conclusie

De Intelligent Streaming Agent van Streamlabs, versneld door NVIDIA RTX, vertegenwoordigt een stap richting slimme automatisering van streaming. Het vervangt de maker niet, maar fungeert als een digitale co-piloot die tijd en aandacht vrijmaakt voor wat echt belangrijk is: spelen en connectie maken met het publiek.

Met de integratie van interactieve 3D-avatars, real-time productie, ingebedde technische ondersteuning en spelgebeurtenisdetectie markeert deze tool een nieuwe fase in de streamingervaring waarin AI niet slechts een aanvulling is, maar een actieve deelnemer aan het creatieproces.

Veelgestelde Vragen

Wat is de Streamlabs Intelligent Streaming Agent?
Dit is een assistent gebaseerd op AI die streamers ondersteunt als co-host, producer en technicus in real-time, geïntegreerd in Streamlabs Desktop en versneld door NVIDIA RTX GPU.

Hoe functioneren de 3D-avatars tijdens live-uitzendingen?
Met behulp van de NVIDIA ACE Audio2Face SDK en prestatieoptimalisatie via DLSS kunnen de avatars in real-time worden geanimeerd en reageren op het publiek zonder dat de streamer het spel hoeft te onderbreken.

Vereist de assistent een cloudverbinding?
Nee. De vision modellen en de belangrijkste functies draaien lokaal op de RTX GPU, wat zorgt voor lage latentie en een soepele ervaring.

Welke andere tools van NVIDIA ondersteunen de assistent?
Het maakt gebruik van de RTX encoder voor streaming, NVIDIA Broadcast voor verbeterde audio/video, en nieuwe integraties met ComfyUI, TensorRT, NIM, en RTX Remix, waardoor het creatieve ecosysteem van pc’s met RTX GPU wordt uitgebreid.

(via: blogs.nvidia)