NVIDIA et ComfyUI simplifient la génération vidéo locale
Lors de la conférence Game Developers (GDC) tenue cette semaine à San Francisco, NVIDIA a dévoilé une suite de mises à jour destinées à optimiser la génération de vidéos par intelligence artificielle pour les développeurs de jeux et les créateurs. Ces innovations, conçues pour fonctionner sur les cartes graphiques RTX et le superordinateur de bureau DGX Spark, visent à simplifier le processus de création de mondes cinématographiques et de personnages iconiques. L'une des avancées majeures concerne ComfyUI, un outil populaire de nœuds pour l'IA. Pour faciliter l'adoption par les artistes peu familiers avec les graphes de nœuds complexes, NVIDIA a intégré une nouvelle interface simplifiée appelée App View. Cette fonctionnalité permet aux utilisateurs de générer des résultats en saisissant simplement une requête et en ajustant quelques paramètres, tout en conservant l'accès aux vues avancées pour les utilisateurs expérimentés. Cette compatibilité s'appuie sur des optimisations matérielles spécifiques aux GPU RTX. Depuis septembre, les performances ont augmenté de 40 %, avec désormais un support natif des formats de données NVFP4 et FP8. Combinés, ces facteurs permettent aux cartes RTX 50 Series d'atteindre des vitesses de traitement 2,5 fois supérieures tout en réduisant l'utilisation de la mémoire vidéo (VRAM) de 60 % grâce au format NVFP4. Pour les configurations FP8, le gain de performance atteint 1,7 fois avec une réduction de 40 % de la VRAM. Plusieurs nouveaux modèles, dont LTX-2.3, FLUX.2 Klein 4B et FLUX.2 Klein 9B, sont désormais disponibles directement dans ComfyUI avec un support NVFP4 et FP8, rendant la génération de contenu plus accessible. Parallèlement, la technologie de suréchantillonnage RTX Video Super Resolution a été intégrée comme nœud au sein de ComfyUI. Elle permet de passer rapidement de rendus de basse résolution à une qualité 4K, une étape qui prenait auparavant plusieurs minutes. Pour les développeurs, NVIDIA a publié un package Python gratuit via PyPI, offrant un accès programmable à cette technologie de suréchantillonnage. Exécutée sur les cœurs Tensor des GPU RTX, cette solution est 30 fois plus rapide que les suréchantillonneurs locaux populaires, tout en nécessitant une fraction de la VRAM. Des tutoriels et du code d'exemple sont disponibles sur GitHub pour faciliter l'intégration. Au-delà de ComfyUI, plusieurs autres outils et mises à jour ont été annoncés. L'application LTX Desktop se présente comme un éditeur vidéo entièrement local et open-source, optimisé pour les GPU NVIDIA. LM Link permet désormais de connecter des appareils distincts pour exécuter des modèles LM Studio sur des machines distantes comme le DGX Spark, simulant ainsi une exécution locale tout en profitant de ressources puissantes. De plus, une mise à jour de l'application NVIDIA, prévue pour le 31 mars, activera des fonctionnalités avancées de génération d'images multiples via DLSS 4.5 pour les propriétaires de GeForce RTX 50 Series. Enfin, NVIDIA RTX Remix introduira de nouvelles fonctionnalités de particules VFX avancées pour améliorer l'immersion dans les jeux modifiés, tandis que des partenariats stratégiques, notamment avec Topaz Labs pour l'optimisation NeuroStream et Microsoft pour le support de VoiceMod sous Windows ML, continuent de renforcer les capacités des PC RTX AI. Ces développements, présentés lors du GDC et précédemment à la CES, témoignent de la volonté de NVIDIA de démocratiser l'accès à l'IA générative locale, offrant des performances de niveau professionnel aux créateurs individuels.
