Banuba, ein führender Anbieter von Augmented-Reality-Technologien mit über neun Jahren Markterfahrung, hat eine bahnbrechende KI-gestützte Lippenbewegungs-Synchronisation für sein Video-Editor-SDK entwickelt. Diese Innovation ermöglicht es, menschliche Gesichter in Videos mit sprachlichem oder gesungenem Inhalt extrem realistisch und natürlich zu animieren. Die Technologie nutzt fortschrittliche neuronale Netze, die Audio-Dateien analysieren, um phonetische Strukturen, Rhythmus und Intonation präzise zu erfassen. Daraus generiert sie automatisch passende Lippenformen, Zungenpositionen und Kieferbewegungen – mit minimaler Verzerrung und ohne den typischen „Uncanny Valley“-Effekt, der bei vielen digitalen Avataren auftritt. Ein besonderer Vorteil liegt in der kreativen Kontrolle: Nutzer können Text-Prompts eingeben, um zusätzliche Aspekte der Performance zu steuern – etwa Gesten, Kopfbewegungen oder emotionale Ausdrucksformen. So kann ein Prompt wie „sprechen Sie selbstbewusst mit offenen Handgesten“ oder „singen Sie traurig, während Sie nach unten schauen“ die gesamte Performance dynamisch beeinflussen, ohne manuelle Animationen vornehmen zu müssen. Dies revolutioniert die Erstellung von Inhalten wie virtuellen Influencern, interaktiven Lernmaterialien, personalisierten Marketingvideos oder immersiven Social-Media-Beiträgen. Anton Liskevich, CPO und Mitgründer von Banuba, betont: „Wir bewegen uns in die Ära interaktiver, KI-getriebener Geschichtenerzählung. Diese Lippen-Synchronisation ist ein Game-Changer für Entwickler, die kreative, effiziente und hochwertige Inhalte schaffen wollen.“ Das Banuba Video Editor SDK ist eine umfassende, leicht integrierbare Lösung für Video-Editing und AR-Effekte. Entwickler können es innerhalb von weniger als acht Minuten in ihre Anwendungen einbinden und ihren Nutzern sofort leistungsstarke Tools zur Verfügung stellen. Neben der KI-Lippen-Synchronisation umfasst das SDK Funktionen wie Gesichtstracking, virtuelle Probefittings für Gesicht, Haare und Hände sowie virtuelle Hintergründe. Banuba ist seit mehr als einer Dekade ein Pionier in der KI- und AR-Technologie und liefert SDKs und fertige Lösungen für Unternehmen weltweit. Die neue Funktion unterstreicht das Unternehmen’s Fokus auf natürliche, menschennahe Interaktionen in digitalen Medien – und setzt neue Maßstäbe für die Zukunft der digitalen Content-Erstellung. Industrieexperten sehen in der Technologie eine entscheidende Entwicklung für die Automatisierung kreativer Prozesse. „Die Kombination aus präziser KI-Synchronisation und kreativer Steuerung per Text ist ein Meilenstein“, sagt ein Analyst aus dem Bereich digitale Medien. „Sie macht hochwertige Inhaltsproduktion zugänglich für kleinere Teams und Start-ups.“ Banuba positioniert sich damit weiter als Schlüsselanbieter für die nächste Generation von interaktiven, KI-basierten Medien.