الدمج المُتَقَدِّم للسياق والهرم السائل للكشف عن الكائنات البارزة في الصور الملونة مع البيانات العمقية
{ Le Zhang Xuan-Yi Li Ming-Ming Cheng Deng-Ping Fan Yang Cao Jia-Xing Zhao}
الملخص
توفر أجهزة الاستشعار العميقة الكثيرة كمية كبيرة من المعلومات المكملة القيّمة للكشف عن الكائنات البارزة (SOD) في الصور من نوع RGBD. ومع ذلك، نظرًا للفرق الجوهري بين المعلومات الملونة (RGB) والعمق، فإن استخلاص الميزات من قناة العمق باستخدام نماذج أساسية مُدرّبة مسبقًا على ImageNet ودمجها مباشرة مع ميزات RGB ليس هو الحل الأمثل. في هذه الورقة، نُدخل مُسبَق التباين (contrast prior)، الذي كان يُعدّ مُؤشّرًا رئيسيًا في الطرق القائمة على الكشف عن الكائنات البارزة غير القائمة على التعلم العميق، إلى هيكلية مبنية على الشبكات العصبية التلافيفية (CNNs) لتعزيز المعلومات العميقة. ثم يتم دمج هذه الميزات العميقة المُحسَّنة مع ميزات RGB للكشف عن الكائنات البارزة باستخدام طريقة جديدة تُسمى "دمج الهرم السائل" (fluid pyramid integration)، التي تُمكّن من الاستفادة الأفضل من الميزات متعددة المقاييس عبر القنوات المختلفة. أظهرت التجارب الشاملة على خمسة مجموعات معيارية صعبة الأداء تفوق البنية المُقترحة CPFP على تسع طرق حديثة متطورة أخرى.
المعايير القياسية
| معيار قياسي | المنهجية | المقاييس |
|---|---|---|
| rgb-d-salient-object-detection-on-des | CPFP | Average MAE: 0.038 S-Measure: 87.2 max E-Measure: 92.3 max F-Measure: 84.6 |
| rgb-d-salient-object-detection-on-lfsd | CPFP | Average MAE: 0.088 S-Measure: 82.8 max E-Measure: 86.3 max F-Measure: 81.1 |
| rgb-d-salient-object-detection-on-nju2k | CPFP | Average MAE: 0.053 S-Measure: 87.8 max E-Measure: 92.6 max F-Measure: 87.7 |
| rgb-d-salient-object-detection-on-nlpr | CPFP | Average MAE: 0.036 S-Measure: 88.8 max E-Measure: 93.2 max F-Measure: 86.7 |
| rgb-d-salient-object-detection-on-sip | CPFP | Average MAE: 0.064 S-Measure: 85.0 max E-Measure: 90.3 max F-Measure: 85.1 |
| rgb-d-salient-object-detection-on-ssd | CPFP | Average MAE: 0.082 S-Measure: 80.7 max E-Measure: 85.2 max F-Measure: 76.6 |
| rgb-d-salient-object-detection-on-stere | CPFP | Average MAE: 0.051 S-Measure: 87.9 max E-Measure: 92.5 max F-Measure: 87.4 |
بناء الذكاء الاصطناعي بالذكاء الاصطناعي
من الفكرة إلى الإطلاق — عجّل تطوير الذكاء الاصطناعي الخاص بك من خلال البرمجة المشتركة المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.