HyperAIHyperAI

Command Palette

Search for a command to run...

هرم التقطيع المدرك للكائنات للكشف عن الكائنات ذات المفردات المفتوحة

Luting Wang Yi Liu Penghui Du Zihan Ding Yue Liao Qiaosong Qi Biaolong Chen Si Liu

الملخص

تهدف الكشف عن الكائنات ذات المفردات المفتوحة إلى تمكين كاشفات الكائنات المدربة على مجموعة ثابتة من فئات الكائنات من القدرة على الكشف عن كائنات يتم وصفها بأسئلة نصية عشوائية. اعتمدت الطرق السابقة على تقنية نقل المعرفة لاستخراج المعرفة من النماذج البصرية واللغوية المُدرّبة مسبقًا (PVLMs) ونقلها إلى كاشفات الكائنات. ومع ذلك، تُعاني هذه الطرق من تدمير المعلومات أثناء عملية استخراج المعرفة، ونقل غير فعّال للمعرفة، نظرًا لعدم مرونة قص الأقتراحات الكائنية وعملية تقليد الميزات على مستوى واحد فقط. لمعالجة هذه القيود، نقترح إطارًا يُسمى هرم نقل المعرفة المُدرك للكائنات (OADP)، يتضمن وحدة استخراج معرفة مُدركَة للكائنات (OAKE) وآلية هرم نقل المعرفة (DP). عند استخراج معرفة الكائنات من نماذج PVLMs، تقوم الوحدة الأولى بتحويل أقتراحات الكائنات بشكل تكيفي، وتستخدم انتباه القناع المُدرك للكائنات للحصول على معرفة دقيقة وشاملة حول الكائنات. أما الآلية الثانية، فهي تُدخل تقليدًا عالميًا وتقليدًا بلوكياً لنقل معرفة أكثر شمولاً، وذلك لتعويض المعلومات المفقودة حول العلاقات أثناء عملية نقل معرفة الكائنات. أظهرت التجارب الواسعة تحسنًا ملحوظًا في أداء طريقة الاقتراح مقارنة بالطرق الحالية. وبخاصة على مجموعة بيانات MS-COCO، حقق إطارنا OADP تقييمًا بلغ 35.635.635.6 mAPN50^{\text{N}}{50}N50، متفوقًا على أحدث طريقة حالية بمقدار 3.33.33.3 mAPN50^{\text{N}}{50}N50. تم إصدار الكود على الرابط: https://github.com/LutingWang/OADP.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp