NovaFlowは、ブラウン大学とロボット工学・人工知能研究所の研究チームによって2025年10月に共同で提案され、関連する研究成果は論文「NovaFlow: 生成されたビデオから実行可能なフローを介してゼロショット操作”。

NovaFlowは、オブジェクト中心で身体性に依存しない自律操作フレームワークであり、タスク記述をデモンストレーションなしに対象ロボットの実行可能な計画に変換します。タスク記述が与えられると、このフレームワークはビデオ生成モデルを用いてビデオを合成し、すぐに利用可能な認識モジュールを用いて3D操作可能なオブジェクトのストリームへと洗練させます。タスク理解と低レベル制御を切り離すことで、NovaFlowは自然な身体性間の移行を可能にします。研究者たちは、デスクトップ型ロボットアームFrankaと四足移動ロボットSpotを用いて、剛体、多関節、変形可能なオブジェクトの操作タスクにおけるNovaFlowの実装を検証し、デモンストレーションや身体性に特化したトレーニングなしに効率的なゼロショット実行を実現しました。