초록
인체-물체 상호작용(HOI) 인식에서 기존 방법들은 인체를 전체로 간주하고 전체 신체 영역에 균일한 주의를 기울입니다. 이러한 접근 방식은 일반적으로 인간이 몇몇 신체 부위를 사용하여 물체와 상호작용한다는 사실을 무시합니다. 본 논문에서는 HOI 인식에서 서로 다른 신체 부위에 서로 다른 수준의 주의가 기울여져야 하며, 서로 다른 신체 부위 간의 상관관계도 고려되어야 한다는 주장을 제기합니다. 이는 우리의 신체 부위들이 항상 협력적으로 작동하기 때문입니다. 우리는 중요한 부위와 그 상관관계에 집중할 수 있는 새로운 쌍별(cpairwise) 신체 부위 주의 모델을 제안합니다. 이 모델에서는 새로운 주의 기반 특성 선택 방법과 쌍별 상관관계를 포착할 수 있는 특성 표현 방식이 소개됩니다. 제안된 접근법은 HICO 데이터셋에서 HOI 인식에 있어 최신 연구 결과보다 4% 향상된 성능을 달성했습니다. 우리는 이 모델과 소스 코드를 공개할 예정입니다.