HyperAIHyperAI

Command Palette

Search for a command to run...

الانتباه البشري في التصنيف الدقيق

Yao Rong Wenjia Xu Zeynep Akata Enkelejda Kasneci

الملخص

الطريقة التي يُركّز بها الإنسان على صورة معينة، ويعالجها، وينمّزها، تمتلك القدرة على تحسين أداء نماذج التعلم العميق بشكل كبير. ويمكن استغلال أماكن تركيز الإنسان لتصحيح النماذج عندما تبتعد عن السمات الأساسية الضرورية لاتخاذ قرارات صحيحة. وللتحقق من أن انتباه الإنسان يحتوي على معلومات قيّمة لعمليات اتخاذ القرار، مثل التصنيف الدقيق، قارنا بين انتباه الإنسان وشرح النماذج في اكتشاف السمات المهمة. من أجل هذا الهدف، جمعنا بيانات نظر الإنسان لبيانات تصنيف دقيقة من نوع CUB، وبنينا مجموعة بيانات تُسمى CUB-GHA (الانتباه البشري القائم على النظرة). علاوة على ذلك، اقترحنا طريقة تُسمى التدريب المعزز بالنظر (Gaze Augmentation Training - GAT) وشبكة دمج المعرفة (Knowledge Fusion Network - KFN) لدمج معرفة نظر الإنسان في نماذج التصنيف. نفذنا مقترحاتنا على مجموعة بيانات CUB-GHA، بالإضافة إلى مجموعة بيانات طبية حديثة الإطلاق تُسمى CXR-Eye التي تتضمن صور أشعة صدرية، مع بيانات نظر جُمعت من طبيب أشعة. أظهرت النتائج أن دمج معرفة انتباه الإنسان يُحدث تحسينًا فعّالًا في التصنيف، حيث زاد من أداء النموذج الأساسي بنسبة 4.38% على مجموعة CXR. وبالتالي، يقدّم عملنا رؤى قيمة لفهم انتباه الإنسان في التصنيف الدقيق، كما يسهم في الأبحاث المستقبلية المتعلقة بدمج نظر الإنسان مع مهام الرؤية الحاسوبية. تُتاح مجموعة بيانات CUB-GHA والكود المصدر على الرابط: https://github.com/yaorong0921/CUB-GHA.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp