Digitales Lebensprojekt: Autonome 3D-Charaktere mit sozialer Intelligenz

In dieser Arbeit stellen wir das Digital Life Projekt vor, ein Framework, das Sprache als universelles Medium nutzt, um autonome 3D-Charaktere zu erstellen, die in der Lage sind, soziale Interaktionen zu führen und durch artikulierte Körpobewegungen auszudrücken, wodurch Leben in einer digitalen Umgebung simuliert wird. Unser Framework besteht aus zwei Hauptkomponenten: 1) SocioMind: eine sorgfältig entwickelte digitale "Gehirnstruktur", die Persönlichkeiten mit systematischen Few-Shot-Beispielen modelliert, einen Reflexionsprozess auf psychologischen Prinzipien basiert integriert und Autonomie durch die Initiation von Dialogthemen emuliert; 2) MoMat-MoGen: ein textgesteuertes Bewegungssyntheseparadigma zur Steuerung des Charakters digitaler Körper. Es kombiniert Bewegungsabgleich (motion matching), eine bewährte Industrietechnik zur Sicherstellung der Bewegungsqualität, mit neuesten Fortschritten im Bereich der Bewegungsgenerierung zur Diversifizierung. Ausführliche Experimente zeigen, dass jedes Modul in seinem jeweiligen Bereich den Stand der Technik erreicht. Zusammen ermöglichen sie es virtuellen Charakteren, Dialoge autonom zu initiieren und fortzuführen, während ihre sozialpsychologischen Zustände sich weiterentwickeln. Gleichzeitig können diese Charaktere kontextuell relevante körperliche Bewegungen ausführen. Zudem ermöglicht ein Modul für Bewegungsbeschreibung (motion captioning), dass der virtuelle Charakter menschliche Spieleraktionen erkennt und angemessen darauf reagiert. Homepage: https://digital-life-project.com/