HyperAIHyperAI
منذ 17 أيام

تدفق التطبيع المتصل بكثافة

Matej Grcić, Ivan Grubišić, Siniša Šegvić
تدفق التطبيع المتصل بكثافة
الملخص

التدفقات العادية هي تطبيقات متبادلة بين المدخلات والتمثيلات المخفية ذات توزيع مُعامل كامل. وتشتهر بقيمة الاحتمال الدقيقة وعينة فعّالة، لكن قدرتها الفعّالة غالبًا ما تكون غير كافية نظرًا لقيود التقابلية التي تحد من عرض النموذج. نعالج هذه المشكلة من خلال إضافة ضوضاء تدريجية إلى التمثيلات الوسطى. ونُعدّل الضوضاء وفقًا للوحدات المتبادلة السابقة، وهو ما نسميه الترابط عبر الوحدات. تعزز وحداتنا المتبادلة من شكل "غلو" القدرة التعبيرية من خلال دمج كتلة متصلة بشكل كثيف مع الانتباه الذاتي لنستروم. ونُشير إلى معمارية نموذجنا باسم DenseFlow نظرًا لأن الترابطات عبر الوحدات والداخلية داخل الوحدة تعتمد كليًا على الاتصال الكثيف. تُظهر التجارب تحسينات كبيرة ناتجة عن المساهمات المقترحة، وتُظهر أداءً متقدمًا على مستوى الحالة في تقدير الكثافة ضمن ميزانيات حسابية معتدلة.

تدفق التطبيع المتصل بكثافة | أحدث الأوراق البحثية | HyperAI