2ヶ月前
LayoutNet: 単一のRGB画像から3D部屋レイアウトを再構成する
Zou, Chuhang ; Colburn, Alex ; Shan, Qi ; Hoiem, Derek

要約
私たちは、単一の画像から部屋のレイアウトを予測するアルゴリズムを提案します。このアルゴリズムは、パノラマ画像と透視画像、立方体形状のレイアウトとより一般的なレイアウト(例:L字型の部屋)に対して汎化が可能です。当手法は、最近の研究で行われているように透視画像に分解せず、直接パノラマ画像に対して操作を行います。ネットワークアーキテクチャはRoomNetと類似していますが、消失点に基づく画像のアライメント、複数のレイアウト要素(コーナー、境界線、サイズ、並進)の予測、およびこれらの予測結果に制約付きマンハッタンレイアウトを適合させることにより改善が示されています。当手法は他の既存のパノラマに関する研究と比較して速度と精度において優れた性能を示し、透視画像に対して最良の精度の一つを達成しており、立方体形状だけでなくより一般的なマンハッタンレイアウトも処理できます。