نُعالج المشكلة الصعبة للكشف عن التفاعل بين الإنسان والجسم (HOI). تُركّز الطرق الحالية إما على التعرف على تفاعل كل زوج إنسان-جسم بشكل منفصل، أو على إجراء استنتاج مشترك باستخدام ميزات معقدة تعتمد على المظهر. في هذه الورقة، نستفيد من تمثيل فراغي-معنوي مُجرّد لوصف كل زوج إنسان-جسم، ونجمّع المعلومات السياقية للصورة من خلال رسم بياني مزدوج للعلاقة (رسم بياني يركّز على الإنسان، وآخر يركّز على الجسم). يُعد الرسم البياني المزدوج للعلاقة الذي نقترحه فعّالًا في استخلاص مؤشرات تمييزية من البيئة لحل الغموض الناتج عن التنبؤات المحلية. يمتاز نموذجنا ببساطة مفاهيمية، ويُحقّق نتائج مُرضية مقارنةً بالخوارزميات الرائدة في الكشف عن التفاعل بين الإنسان والجسم على مجموعتي بيانات معياريتين كبيرتين.