نمذجة العلاقات من الدرجة العالية القائمة على الرسوم البيانية للتعرف على الإجراءات طويلة الأمد

تتضمن الإجراءات طويلة المدى مفاهيم بصرية مهمة عديدة، مثل الأشياء والحركة والإجراءات الفرعية، وهناك علاقات متنوعة بين هذه المفاهيم، والتي نسميها العلاقات الأساسية. ستؤثر هذه العلاقات الأساسية معًا على بعضها البعض أثناء التطور الزمني للإجراءات طويلة المدى، مما يُشكّل العلاقات من الدرجة العليا التي تُعدّ ضرورية للتعرف على الإجراءات طويلة المدى. في هذه الورقة، نقترح وحدة نمذجة العلاقات من الدرجة العليا القائمة على الرسوم البيانية (GHRM) لاستغلال العلاقات من الدرجة العليا في الإجراءات طويلة المدى للتعرف على هذه الإجراءات. في وحدة GHRM، يتم تمثيل كل علاقة أساسية في الإجراءات طويلة المدى بواسطة رسم بياني، حيث يمثل كل عقدة في الرسم البياني فترة زمنية ضمن فيديو طويل. علاوةً على ذلك، عند نمذجة كل علاقة أساسية، يتم دمج المعلومات من جميع العلاقات الأساسية الأخرى بواسطة وحدة GHRM، وبالتالي يمكن استغلال العلاقات من الدرجة العليا في الإجراءات طويلة المدى بشكل فعّال. ولتحسين استغلال العلاقات من الدرجة العليا على طول المحور الزمني، قمنا بتصميم طبقة GHRM تتكون من فرع زمني (Temporal-GHRM) وفرع معنوي (Semantic-GHRM)، بحيث تهدف إلى نمذجة العلاقات من الدرجة العليا المحلية على المستوى الزمني والعلاقات من الدرجة العليا العالمية على المستوى المعنوي. وأظهرت النتائج التجريبية على ثلاث مجموعات بيانات للتعرف على الإجراءات طويلة المدى، وهي Breakfast وCharades وMultiThumos، فعالية نموذجنا.