HyperAIHyperAI

Command Palette

Search for a command to run...

تغطية نشاط العصبون: إعادة التفكير في الكشف عن التوزيعات غير الموزونة والتعميم

Yibing Liu Chris Xing Tian Haoliang Li Lei Ma Shiqi Wang

الملخص

يظهر مشكلة البيانات خارج التوزيع (OOD) عادةً عندما تواجه الشبكات العصبية بيانات تختلف بشكل كبير عن توزيع البيانات المستخدمة في التدريب، أي البيانات ضمن التوزيع (InD). في هذه الورقة، ندرس مشكلة OOD من منظور تفعيل العصبونات. نقوم أولاً بصياغة حالات تفعيل العصبونات من خلال أخذ كل من مخرجات العصبون وتأثيرها على قرارات النموذج بعين الاعتبار. ثم، لوصف العلاقة بين العصبونات ومشكلات OOD، نقدم مقياسًا بسيطًا يُسمى \textit{تغطية تفعيل العصبونات} (NAC) – وهو مقياس لسلوك العصبونات تحت بيانات التوزيع الداخلي (InD). باستخدام مقياس NAC، نُظهر أن: 1) يمكن فصل المدخلات ضمن التوزيع (InD) عن المدخلات خارج التوزيع (OOD) إلى حد كبير بناءً على سلوك العصبونات، مما يُخفّف بشكل كبير من صعوبة كشف OOD، ويتفوق على 21 طريقة سابقة على ثلاث معايير (CIFAR-10، CIFAR-100، وImageNet-1K). 2) توجد علاقة ارتباط إيجابية مستمرة بين NAC وقدرة النموذج على التعميم عبر مختلف الهياكل والبيانات، مما يتيح استخدام معيار مبني على NAC لتقييم مرونة النموذج. مقارنةً بالمعايير الشائعة لتقييم البيانات ضمن التوزيع (InD)، نُظهر أن NAC لا يُمكنه فقط اختيار نماذج أكثر مرونة، بل يمتلك أيضًا ارتباطًا أقوى بأداء النموذج في اختبارات OOD.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp