
초록
자연 장면의 광학 흐름은 관찰자의 움직임과 객체의 독립적인 움직임이 결합된 결과입니다. 기존 알고리즘은 일반적으로 순수하게 정적인 세계를 가정한 상태에서 운동과 구조를 복원하거나 일반적인 제약 조건이 없는 장면에 대한 광학 흐름을 중점적으로 다루고 있습니다. 우리는 이러한 접근 방식을 결합하여 외관과 물리적 제약 조건을 바탕으로 움직이는 객체의 명시적 분할을 추정하는 광학 흐름 알고리즘을 개발하였습니다. 정적 영역에서는 강력한 제약 조건을 활용하여 여러 프레임에 걸쳐 카메라 운동과 장면의 3D 구조를 공동으로 추정합니다. 이는 운동 대신 구조를 규제화하는 것이 가능하도록 합니다. 우리의 공식화는 작은 베이스라인에서도 작동하는 Plane+Parallax(평면+시차) 프레임워크를 사용하며, 운동 추정을 일차원 검색 문제로 축소하여 더 정확한 추정 결과를 제공합니다. 움직이는 영역에서는 광학 흐름이 제약 조건 없이 처리되며, 기존의 광학 흐름 방법을 사용하여 계산됩니다. 이렇게 하여 개발된 Mostly-Rigid Flow(MR-Flow) 방법은 MPI-Sintel 및 KITTI-2015 벤치마크에서 최상의 성능을 달성하였습니다.