El monde du streaming évolue à une vitesse fulgurante, tout comme les outils indispensables aux créateurs pour suivre le rythme. Lors de Logitech G PLAY 2025, Streamlabs —en collaboration avec NVIDIA et InWorld— a présenté son Intelligent Streaming Agent, un assistant doté d’IA et de technologies RTX, conçu pour accompagner le streamer en direct en tant que coprésentateur, producteur et support technique.

De la multitâche au assistant intelligent

Jusqu’à présent, un créateur devait jouer simultanément le rôle de joueur, animateur, réalisateur et modérateur, tout en gérant les problèmes techniques. Le nouvel Streaming Agent vise à transformer ce modèle en agissant comme un collaborateur en temps réel capable de :

• Coprésenter le direct avec un avatar 3D animé via NVIDIA ACE Audio2Face et optimisé avec DLSS. Cet avatar peut répondre au chat ou maintenir la conversation lorsque le public reste silencieux.
• Produire la diffusion en changeant de scènes, en activant sons ou clips, et en exécutant des signaux prédéfinis, le tout avec des déclencheurs configurables que le streamer peut personnaliser.
• Assurer un support technique, en répondant aux questions sur Streamlabs ou en aidant à résoudre les erreurs sans interrompre la direct.

« Avec l’intégration d’ACE Audio2Face dans Streamlabs, les créateurs peuvent offrir des expériences plus immersives en utilisant des avatars réalistes et en bénéficiant d’une intelligence en temps réel, directement depuis leur PC équipé de NVIDIA GeForce RTX AI », explique Jason Paul, vice-président de la technologie de la plateforme GeForce chez NVIDIA.

Streaming professionnel accessible à tous

Il y a quelques années, réaliser un stream nécessitait deux ordinateurs, des caméras DSLR et des microphones XLR. NVIDIA a travaillé à démocratiser cette activité par le biais de plusieurs innovations :

• Codage efficace : le encodeur de NVIDIA permet de diffuser en haute qualité avec un seul PC équipé d’une GPU RTX.
• Amélioration audio et vidéo : grâce à NVIDIA Broadcast, même des microphones et webcams abordables offrent un son et une image professionnels.
• Diffusion optimisée : des fonctionnalités comme Enhanced Broadcast de Twitch et OBS facilitent la diffusion en plusieurs qualités, même pour des petits canaux, sans dépendre entièrement de l’infrastructure de la plateforme.

Le nouveau assistant de Streamlabs exploite ces avancées tout en intégrant une couche d’IA agentic, permettant à des streamers débutants de produire des diffusions dynamiques, avec des overlays réactifs, des avatars personnalisés et une production automatisée.

Reconnaissance en temps réel et modèles de vision accélérés

Une des fonctionnalités les plus remarquables est l’utilisation de modèles de vision en temps réel, accélérés par NVIDIA RTX, capable de détecter des événements dans le jeu comme des éliminations, des victoires ou des chutes critiques de santé. Ces informations permettent d’activer automatiquement des effets ou des changements de scène, apportant fluidité et dynamisme sans intervention humaine.

Tous ces traitements se déroulent en local sur la GPU RTX, garantissant une faible latence et évitant la dépendance à la cloud, un aspect crucial pour le streaming en direct.

Un écosystème créatif au-delà du streaming

Cette annonce s’inscrit dans un contexte plus large : NVIDIA impulse un écosystème d’IA générative et d’outils de création pour PC équipés de RTX. Parmi les nouveautés récentes, on trouve :

• ComfyUI v3.57 : optimisations jusqu’à 40 % de performance pour les modèles génératifs grâce à RTX, avec le support de nouveaux modèles comme Wan 2.2 (vidéo), Qwen-Image (texte et image), FLUX.1 Krea [dev] et Hunyuan3D 2.1 (création d’actifs 3D).
• TensorRT et microservices NIM : l’exécution de modèles optimisés comme Stable Diffusion 3.5 ou FLUX.1 Kontext est jusqu’à 3 fois plus rapide avec une consommation de VRAM réduite de 50 % sur RTX.
• RTX Remix amélioré : un nouveau système de particules avec path tracing permettant aux modders de donner vie à des jeux classiques avec des effets visuels réalistes et interactifs.

Ces outils, combinés au Streaming Agent, renforcent la place des GPU RTX comme pôle de la création numérique, couvrant le streaming en direct, la production de contenus 3D ou la retouche avancée d’images et vidéos.

Conclusion

Le Intelligent Streaming Agent de Streamlabs, propulsé par NVIDIA RTX, marque une étape vers l’automatisation intelligente du streaming. Il ne remplace pas le créateur, mais agit comme un co-pilote numérique libérant du temps et de l’attention pour l’essentiel : jouer et fédérer l’audience.

Avec ses avatars 3D interactifs, sa production en temps réel, son support technique intégré et la détection d’événements dans le jeu, cet outil ouvre la voie à une nouvelle étape où l’IA devient un acteur actif dans l’expérience de diffusion.

Questions fréquentes

Qu’est-ce que l’Streamlabs Intelligent Streaming Agent ?
C’est un assistant basé sur l’IA qui accompagne le streamer en tant que coprésentateur, producteur et technicien en temps réel, intégré à Streamlabs Desktop et acceleré par une GPU NVIDIA RTX.

Comment fonctionnent les avatars 3D en direct ?
Grâce au SDK NVIDIA ACE Audio2Face et à la montée en puissance avec DLSS, ces avatars s’animent en temps réel et réagissent à la audience sans interrompre le jeu.

L’assistant nécessite-t-il une connexion cloud ?
Non. Les modèles de vision et les fonctionnalités principales s’exécutent en local sur la GPU RTX, assurant une faible latence et une expérience fluide.

Quelles autres outils NVIDIA complètent l’assistant ?
Il s’appuie sur l’encodeur RTX pour le streaming, NVIDIA Broadcast pour l’amélioration audio/vidéo, et de nouvelles intégrations comme ComfyUI, TensorRT, NIM et RTX Remix, élargissant l’écosystème créatif autour des PC équipés de GPU RTX.

Sources : blog NVIDIA