SIMMIC (Sowned and Interactive Multimodal Conversations の正式名) は、状況に応じたインタラクティブなマルチモーダル会話データ セットです。これには、マルチモーダル オズの魔法使い (WoZ) セットアップによる 2 つの SIMMC データ セット、合計 13,000 のヒューマン ダイアログ ボックス、169,000 の文が含まれます。 2 つのショッピング シナリオで収集します。

• 家具: 共有仮想環境に基づく
• ファッション: 進化する一連のイメージに基づく

引用

@article{moon2020situated, タイトル={状況に応じたインタラクティブなマルチモーダル会話}、 著者={Moon, Seungwhan、Kottur, Satwik、Crook, Paul A、De, Ankita、Poddar, Shivani、Levin, Theodore、Whitney, David、Difranco, Daniel、Beirami, Ahmad、Cho, Eunjoon、Subba, Rajen、Geramifard, Alborz}、 ジャーナル={arXivプレプリント arXiv:2006.01460}、 年={2020} } @article{crook2019simmc, タイトル={SIMMC: 状況に応じたインタラクティブなマルチモーダル対話型データ収集および評価プラットフォーム}、 著者={ポール A クルック、シヴァニ ポッダー、アンキタ デ、セミール シャフィ、デビッド ホイットニー、アルボルズ ゲラミファード、ラジェン スッバ} ジャーナル={arXivプレプリント arXiv:1911.02690}、 年={2019} }