2달 전

디지털 라이프 프로젝트: 사회적 지능을 가진 자율 3D 캐릭터

Cai, Zhongang ; Jiang, Jianping ; Qing, Zhongfei ; Guo, Xinying ; Zhang, Mingyuan ; Lin, Zhengyu ; Mei, Haiyi ; Wei, Chen ; Wang, Ruisi ; Yin, Wanqi ; Fan, Xiangyu ; Du, Han ; Pan, Liang ; Gao, Peng ; Yang, Zhitao ; Gao, Yang ; Li, Jiaqi ; Ren, Tianxiang ; Wei, Yukun ; Wang, Xiaogang ; Loy, Chen Change ; Yang, Lei ; Liu, Ziwei
디지털 라이프 프로젝트: 사회적 지능을 가진 자율 3D 캐릭터
초록

이 연구에서는 디지털 환경에서 생명을 시뮬레이션하는 자율적인 3D 캐릭터를 구축하기 위해 언어를 보편적 매체로 활용하는 '디지털 라이프 프로젝트(Digital Life Project)' 프레임워크를 제시합니다. 본 프레임워크는 두 가지 주요 구성 요소로 이루어져 있습니다: 1) 소시오마인드(SocioMind): 체계적인 몇몇 예제(few-shot exemplars)를 통해 성격을 모델링하고, 심리학 원칙에 기반한 반성 과정을 통합하며, 대화 주제를 제안함으로써 자율성을 시뮬레이션하는 정교하게 설계된 디지털 뇌입니다. 2) 모모트-모젠(MoMat-MoGen): 텍스트 기반의 동작 합성 패러다임으로, 캐릭터의 디지털 몸을 제어합니다. 이 모듈은 동작 품질을 보장하기 위한 검증된 산업 기술인 동작 일치(motion matching)와 다양성을 위한 최신 동작 생성 기술을 통합합니다. 광범위한 실험 결과 각 모듈이 해당 분야에서 최고 수준의 성능을 달성하였음을 입증하였습니다. 이들 모듈은 집합적으로 가상 캐릭터가 자율적으로 대화를 시작하고 지속할 수 있으며, 사회-심리 상태가 진화하도록 지원합니다. 동시에 이러한 캐릭터들은 상황에 맞는 신체 운동을 수행할 수 있습니다. 또한, 동작 캡셔닝 모듈은 가상 캐릭터가 인간 플레이어들의 행동을 인식하고 적절히 반응할 수 있도록 합니다. 홈페이지: https://digital-life-project.com/

디지털 라이프 프로젝트: 사회적 지능을 가진 자율 3D 캐릭터 | 최신 연구 논문 | HyperAI초신경