تمثيل ثنائي زمني للتعرف على الإجراءات القائمة على الأحداث

في هذه الورقة، نقدّم استراتيجية تجميع الأحداث لتحويل مخرجات كاميرا الأحداث إلى إطارات قابلة للمعالجة بواسطة خوارزميات الرؤية الحاسوبية التقليدية. يبدأ المنهج المقترح بإنشاء تسلسلات من التمثيلات الثنائية الوسيطة، والتي تُحوّل بعد ذلك إلى تنسيق مكثّف دون فقدان معلومات من خلال تطبيق بسيط لتحويل ثنائي إلى عشري. تسمح هذه الاستراتيجية بتشفير المعلومات الزمنية مباشرة في قيم البكسل، والتي تُفسر لاحقًا بواسطة نماذج التعلم العميق. نطبّق استراتيجيتنا، التي تُسمّى التمثيل الثنائي الزمني، على مهمة التعرف على الإشارات اليدوية، ونحصل على نتائج تُعدّ من أفضل النتائج المُحققة على مجموعة بيانات DVS128 الشهيرة للإشارات. ولإبراز فعالية المنهج المقترح مقارنة بالأساليب الحالية، نقوم أيضًا بجمع توسيع لمجموعة البيانات تحت ظروف أكثر تحديًا لإجراء التجارب عليها.