NVIDIA und ComfyUI simplifizieren lokale KI-Videoerstellung
Auf der Game Developers Conference (GDC) in San Francisco hat NVIDIA umfangreiche Aktualisierungen vorgestellt, die die lokale KI-Videoerstellung für Spieleentwickler und Kreative auf RTX-GPUs und dem DGX Spark Desktop-System erheblich vereinfachen. Diese Entwicklungen zielen darauf ab, den Workflow für Konzeptentwicklung und Storyboarding zu optimieren und hochwertige Ergebnisse ohne Cloud-Abhängigkeit zu ermöglichen. Ein zentraler Fokus liegt auf der Integration mit ComfyUI, einer Plattform für visuelle KI-Workflows. Die neue App-Ansicht macht die Technologie auch für Nutzer zugänglich, die keine Erfahrung mit komplexen Knotendiagrammen haben. Anwender können nun direkt mit Texteingaben arbeiten, Parameter anpassen und Inhalte generieren, während die volle Flexibilität der Knotenansicht weiterhin verfügbar bleibt. Die Performance auf RTX-Grafikkarten wurde durch Optimierungen im September um 40 % gesteigert. Neu ist die native Unterstützung der Datenformate NVFP4 und FP8. In Kombination mit der GeForce RTX 50-Serie führt dies zu einer 2,5-fachen Leistungssteigerung bei gleichzeitiger Reduzierung des VRAM-Verbrauchs um 60 %. Für FP8-Modelle auf denselben Hardware-Einheiten wurde eine Beschleunigung von 1,7-fach und eine Speicherreduktion von 40 % erreicht. Neben den bereits eingeführten Modellen werden nun weitere wie LTX-2.3, FLUX.2 Klein 4B und 9B für diese Formate unterstützt. Ein weiterer Meilenstein ist die schnelle Upskalierung von Videos in 4K-Auflösung. Bisher erfordeten professionelle Verfahren oft einen Kompromiss zwischen Geschwindigkeit und Qualität. Mit der NVIDIA RTX Video Super Resolution, die nun als eigenständiger Knoten in ComfyUI verfügbar ist, kann dieser Prozess dramatisch beschleunigt werden. NVIDIA hat zudem eine kostenlose Python-Bibliothek veröffentlicht, die Entwicklern programmatischen Zugriff auf dieselbe Technologie bietet, die auch die RTX Video-Funktion antreibt. Diese läuft direkt auf den Tensor-Kernen der RTX-Grafikkarten und skaliert Videos laut Herstellerangaben bis zu 30-mal schneller als gängige lokale Konkurrenzlösungen, wobei der Speicherbedarf deutlich geringer ausfällt. Neben den Software-Updates für ComfyUI und Python wurden weitere Integrationen für den lokalen KI-Workflow angekündigt. LTX Desktop stellt einen vollständig lokalen Open-Source-Videoeditor vor, der auf der LTX-Engine basiert und für NVIDIA-Hardware optimiert ist. Die Technologie LM Link ermöglicht es, verschiedene Geräte zu vernetzen, sodass Modelle auf entfernten Servern wie dem DGX Spark so genutzt werden können, als wären sie lokal installiert. Zudem plant NVIDIA für Ende März Updates für die NVIDIA App Beta, die neue Funktionen für die dynamische Mehrfachbildgenerierung für Besitzer der RTX 50-Serie enthalten wird. Die Palette der Neuerungen wird durch Updates für NVIDIA RTX Remix erweitert, die Moddern fortgeschrittene Partikel-Effekte ermöglichen, sowie durch eine Zusammenarbeit mit Topas Labs, um die NeuroStream-Technologie für den effizienteren Betrieb komplexer Modelle auf Consumer-Hardware zu optimieren. Auch Microsoft hat die Unterstützung für VoiceMod eingeführt, was die Sprachqualität bei GPU-Inferenz auf Windows-Geräten signifikant verbessert. Diese Entwicklungen markieren einen weiteren Schritt hin zur Entmystifizierung professioneller KI-Videoerstellung und legen den Grundstein für immersivere digitale Inhalte direkt auf lokalen Arbeitsplätzen.
