Command Palette
Search for a command to run...
طويل المدى قصير الأجل للكشف عن الأنشطة عبر الإنترنت
طويل المدى قصير الأجل للكشف عن الأنشطة عبر الإنترنت
Mingze Xu Yuanjun Xiong Hao Chen Xinyu Li Wei Xia Zhuowen Tu Stefano Soatto
الملخص
نقدم خوارزمية النمذجة الزمنية للكشف عن الأنشطة عبر الإنترنت تسمى "LSTR" (Long Short-term TRansformer)، والتي تستفيد من آلية الذاكرة طويلة المدى وقصيرة المدى لنمذجة بيانات التسلسل الطويلة. تتكون هذه الخوارزمية من مُشفر LSTR يستخدم بشكل ديناميكي المعلومات التاريخية على نطاق خشن من نافذة زمنية ممتدة (مثل 2048 إطارًا تغطي ما يصل إلى 8 دقائق)، بالإضافة إلى مُفكك LSTR يركز على نافذة زمنية قصيرة (مثل 32 إطارًا تغطي 8 ثوانٍ) لنمذجة الخصائص الدقيقة للبيانات. بالمقارنة مع الأعمال السابقة، توفر LSTR طريقة فعالة وكفوءة لنمذجة الفيديوهات الطويلة باستخدام عدد أقل من القواعد التجريبية، وهو ما تم التحقق منه من خلال تحليل تجريبي شامل. حققت LSTR أداءً رائدًا في ثلاثة مقاييس قياسية لكشف الأنشطة عبر الإنترنت، وهي THUMOS'14 وTVSeries وHACS Segment. تم جعل الكود متاحًا على الرابط التالي: https://xumingze0308.github.io/projects/lstr