HyperAI
Back to Headlines

Neues AI-Video-Modell LTX-Video13B veröffentlicht: 30-fach schneller und open source

vor 8 Tagen

LTX-Video 13B veröffentlicht! 30-fache Geschwindigkeit bei HD-Videos, Open-Source-AI macht Kreationen grenzenlos! Die KI-Videoerstellungs-Technologie hat einen weiteren Meilenstein erreicht. Das Unternehmen Lightricks hat kürzlich sein neuestes Open-Source-Videoerstellungsmodell, LTX-Video 13B, im Rahmen seines LTX Studio-Programms vorgestellt. Dieses Modell, das 13 Milliarden Parameter aufweist, ist 30-mal schneller als vergleichbare Modelle und zeichnet sich durch innovative Multiskalen-Rendering-Techniken aus. Es hat schnell die Aufmerksamkeit der Branche erregt, da es effizient auf Consumer-GPUs wie der NVIDIA RTX 4090 läuft und sowohl die Video-Kohärenz als auch die Detailgenauigkeit erheblich verbessert. Technologische Durchbrüche: Multiskalen-Rendering revolutioniert Videoerstellung LTX-Video 13B nutzt eine einzigartige Multiskalen-Rendering-Methode, bei der zuerst eine grobe Bewegung und Szeneanordnung in niedriger Auflösung generiert wird, bevor die Details schrittweise verfeinert werden. Diese Ansatz ermöglicht es dem Modell, die Erstellungsgeschwindigkeit um den Faktor 30 zu erhöhen, ohne dabei die Qualität einzubüßen. Ein 5-Sekunden-Video kann in nur 2 Sekunden gerendert werden, und das Modell verfügt über niedrigere Speicheranforderungen, was die Effizienz des Schaffensprozesses für die Nutzer erheblich steigert. Basierend auf der DiT (Diffusion Transformer)-Architektur und unterstützt durch fortgeschrittene Kernoptimierungen sowie das bfloat16-Datenformat, bietet LTX-Video 13B eine optimierte Leistung. Es unterstützt eine Auflösung von 1216×704 Pixeln und eine Bildwiederholrate von 30 Frames pro Sekunde, wodurch es sich für Text-zu-Video, Bild-zu-Video und Video-zu-Video-Erstellungsmodi eignet. Leistungsstarke Funktionen: Präzise Kontrolle und grenzenlose Kreativität LTX-Video 13B zeichnet sich durch hervorragende Bewegungskohärenz, Szenenstruktur und Kameraperspektivenverstehen aus. Es kann logisch strukturierte und detailreiche Videoinhalte generieren und bietet Feinsteuerungsmöglichkeiten für die Nutzer. Beispielsweise können Kreativs durch Texthinweise oder Referenzbilder die Bewegungen von Charakteren, Szenenwechsel oder Kameraeinstellungen präzise anpassen, um filmähnliche visuelle Effekte zu erzielen. Darüber hinaus unterstützt das Modell Funktionen zur Verlängerung und Stil-/Bewegungsanpassung von Videos. Nutzer können bestehende Videos bis zu 60 Sekunden verlängern oder sie stilistisch verändern, indem sie beispielsweise realitätsnahe Szenen in Animationsstile konvertieren. Diese Flexibilität macht LTX-Video 13B zu einem wertvollen Werkzeug für Kurzfilmproduktion, Werbekreation und Social-Media-Inhaltsgestaltung. Open-Source-Ökosystem: Entwickler und Kreativen mächtige Unterstützung Als Open-Source-Modell ist LTX-Video 13B kostenlos auf GitHub und Hugging Face verfügbar, sodass Entwickler und Kreativs es frei modifizieren und anpassen können. Lightricks stellt zusätzlich das LTX-Video-Trainer-Tool zur Verfügung, das die vollständige Feinjustierung sowohl des 2B- als auch des 13B-Modells sowie LoRA (Low-Rank Adaptation)-Training ermöglicht. Dies erleichtert es den Nutzern, personalisierte Kontrollmodelle zu entwickeln, wie z.B. Tiefen-, Pose- oder Kantenerkennung. Die Kompatibilität mit ComfyUI-Workflows und der neue Looping Sampler-Knoten unterstützen die Erstellung beliebig langer Videos mit konsistenten Bewegungen. Um die Nutzungsoberfläche zu vereinfachen, hat Lightricks eine Reihe von Hilfsprogrammen veröffentlicht, darunter eine 8-Bit-Quantisierungs-Version (ltxv-13b-fp8) und das IC-LoRA Detailer, die die Leistung auf Geräten mit geringem Speicher verbessern. Das Modell ist für Start-ups und Organisationen mit einem Jahresumsatz unter 1 Million US-Dollar kostenlos zugänglich, was Lightricks' Engagement für die Demokratisierung von KI unterstreicht. Neue Meilensteine in der Videokreation Nach Ansicht von AIbase markiert die Einführung von LTX-Video 13B einen wichtigen Schritt in Richtung höherer Offenlegung von Videoerstellungs-Technologien. Die innovative Multiskalen-Rendering-Technik und die Optimierung für Consumer-Hardware haben die traditionelle Abhängigkeit von hochleistungsfähigen Geräten abgebaut und professionelle Kreativwerkzeuge für kleinere Teams und individuelle Kreativs zugänglich gemacht. In Kombination mit der Zusammenarbeit der Open-Source-Gemeinschaft könnte LTX-Video 13B weitere Innovationen in der Videoerstellungs-Technologie vorantreiben und in Bereichen wie Film, Spiele, Werbung und Bildung breit angewendet werden. Das Modell ist bereits in die LTX Studio-Plattform integriert, und Nutzer können es über die offizielle Website (https://ltx.studio) oder GitHub (https://github.com/Lightricks/LTX-Video) herunterladen und nutzen. Lightricks plant, das Modell kontinuierlich zu verbessern, indem es zusätzliche Kontrollarten und multimodale Funktionen hinzufügt, um den Kreativen noch leistungsstärkere Werkzeuge zu bieten. Zukunftsaussichten: Ein neues Kapitel in der KI-Videokreation Lightricks betont, dass die Entwicklung von LTX-Video 13B durch Partnerschaften mit Anbietern hochwertiger Datensätze wie Getty Images ermöglicht wurde, was die kommerzielle Sicherheit und visuelle Attraktivität der Ergebnisse gewährleistet. In Zukunft wird das Team sich mit zeitlichen Veränderungen in Hinweisen und multimodal generierten Inhalten befassen, um komplexere Kreativbedarfe zu decken. AIbase sieht in LTX-Video 13B ein großes Potenzial, um zu einem Maßstab in der KI-basierten Videoerstellung zu werden, insbesondere dank der Unterstützung durch die Open-Source-Gemeinschaft. Proben Sie LTX-Video 13B hier aus: https://app.ltx.studio/gen-workspace Modell herunterladen: https://ltxv.video/#get-started Industrie-Experten und Analysten sind sich einig, dass LTX-Video 13B die Videoerstellungs-Industrie revolutionieren könnte. Die Leistung des Modells, verbunden mit seiner Offenlegung, gibt Entwicklern und Kreativen die Möglichkeit, ihre Ideen auf eine Weise umzusetzen, die bisher nur wenigen offenstand. Lightricks, ein führendes Unternehmen in der Bereitstellung von KI-gestützten Kreativwerkzeugen, zeigt damit erneut seine Vision, Technologie für alle zugänglich zu machen.

Related Links