デジタルライフプロジェクト:社会的知能を持つ自律的な3Dキャラクター

本研究では、デジタルライフプロジェクトを紹介します。これは言語を普遍的な媒体として利用し、自律的な3Dキャラクターを構築するフレームワークです。これらのキャラクターは社会的な交流に参加し、articulated body motions(関節付きの身体動作)で表現を行うことができ、デジタル環境における生命をシミュレートします。当フレームワークは以下の2つの主要なコンポーネントから構成されています:1) SocioMind(ソシオマインド):性格をsystematic few-shot exemplars(体系的な少ショット例)でモデル化し、心理学の原理に基づく反射プロセスを取り入れ、対話のトピックを提起することで自律性を模倣する精巧に設計されたデジタル脳;2) MoMat-MoGen(モマット・モジェン):テキスト駆動型の運動合成パラダイムで、キャラクターのデジタル体を制御します。これは、運動品質を確保するために業界で実証されたmotion matching(運動マッチング)技術と、多様性のために最先端の運動生成技術を統合しています。広範な実験により、各モジュールがそれぞれの分野で最先端の性能を達成していることが示されています。これらが共同して機能することで、仮想キャラクターは自律的に対話を開始および継続させることができるとともに、その社会心理状態を発展させることができます。さらに、これらのキャラクターは文脈に関連した身体動作を行うことができます。また、motion captioning(運動キャプショニング)モジュールにより、仮想キャラクターは人間プレイヤーの行動を認識し、適切に対応することができます。ホームページ: https://digital-life-project.com/