ATISS: 실내 장면 합성용 자기회귀 변환기

실제적이고 다양한 실내 가구 배치를 자동으로 또는 부분 입력을 기반으로 합성하는 능력은, 보다 나은 대화형 3D 도구부터 훈련 및 시뮬레이션용 데이터 합성에 이르기까지 많은 응용 분야를 열어줍니다. 본 논문에서는 방 유형과 평면도만 주어진 상태에서 다양하고 타당한 합성 실내 환경을 생성하기 위한 새로운 자기회귀 변환기 구조인 ATISS를 제시합니다. 이전 연구가 장면 합성을 시퀀스 생성 문제로 접근한 것과 달리, 우리의 모델은 객체의 순서와 무관한 집합 형태로 방을 생성합니다. 우리는 이러한 공식화가 더 자연스럽다고 주장하며, 이는 ATISS가 완전히 자동화된 방 배치 합성 외에도 일반적으로 유용하다는 것을 의미합니다. 예를 들어, 동일한 훈련된 모델은 일반적인 장면 완성, 사용자가 지정한 임의의 객체를 포함하는 부분적인 방 재배치, 그리고 임의의 부분 방에 대한 객체 제안 등 대화형 응용 프로그램에서 사용될 수 있습니다. 이를 가능하게 하기 위해, 우리의 모델은 부분 장면 조건부로 변환기의 순열 동등성을 활용하며, 객체 순서에 대해 순열 불변성을 갖도록 훈련됩니다. 우리의 모델은 라벨링된 3D 바운딩 박스만을 감독 자료로 사용하여 단일 과정으로 자기회귀 생성 모델로 훈련됩니다. 3D-FRONT 데이터셋의 네 가지 방 유형에 대한 평가는 우리 모델이 기존 방법보다 더 현실적인 타당한 방 배치를 일관되게 생성함을 보여주며, 또한 매개변수 개수가 적고 구현 및 훈련이 간단하며 기존 방법보다 최대 8배 빠르게 실행됨을 입증합니다.