Easy Communication の正式名である EasyCom は、騒がしい環境でも簡単に通信できる拡張現実データ セットおよびアルゴリズムです。このデータセットには 5 時間以上のマルチモーダル データが含まれており、AR メガネ着用者の会話を改善するアルゴリズムのトレーニングとテストに使用できます。 データセットには、AR グラス、自己中心的なマルチチャネル マイク アレイ オーディオ、広視野 RGB ビデオ、音声ソース ポーズ、ヘッドセット マイク オーディオ、注釈付き音声アクティビティ、音声転写、頭部境界ボックス、音声ターゲットとソースの識別アノテーションが含まれています。

引用

@ARTICLE{donley2021easycom,
author={Jacob Donley and Vladimir Tourbabin and Jung-Suk Lee and Mark Broyles and Hao Jiang and Jie Shen and Maja Pantic and Vamsi Krishna Ithapu and Ravish Mehra},
title={EasyCom: An Augmented Reality Dataset to Support Algorithms for Easy Communication in Noisy Environments},
year={2021},
eprint={2107.04174},
archivePrefix={arXiv},
primaryClass={cs.SD}
}