OmniPart: 部分認識を備えた意味論的分離と構造的一致性を持つ3D生成

3Dアセットの作成において、明示的で編集可能な部品構造を持つものは、インタラクティブなアプリケーションの進歩にとって重要です。しかし、ほとんどの生成手法は単一の形状しか生成せず、その有用性が制限されています。本稿では、OmniPartという新しいフレームワークを紹介します。OmniPartは、部品に意識的な3Dオブジェクト生成を設計しており、各部品間での高い意味的な分離を達成しながら、堅牢な構造的一体性を維持することを目指しています。OmniPartはこの複雑なタスクを2つの相乗効果のある段階に独自に分離します。(1) 自己回帰型構造計画モジュールが制御可能で可変長の3D部品バウンディングボックスのシーケンスを生成します。これは柔軟な2D部品マスクによって重要なガイダンスを受け、直接的な対応関係や意味ラベルを必要とせずに直感的な部品分解制御が可能です。(2) 空間条件付き修正フローモデルが、事前学習された全体的な3Dジェネレータから効率的に適応され、計画された配置内で全ての3D部品を同時にかつ一貫して合成します。当手法はユーザ定義の部品粒度、精密な位置特定をサポートし、多様な下流アプリケーションへの適用を可能にします。広範囲にわたる実験により、OmniPartが最先端の性能を達成していることが示されており、より解釈可能で編集可能かつ多用途な3Dコンテンツへの道を開いています。