HyperAIHyperAI

Command Palette

Search for a command to run...

Console
منذ 5 أيام

تصميم نواة تكيفية لتحسين بايزي هو أمر سهل كتقطيع كعكة باستخدام نماذج اللغة الكبيرة

Richard Cornelius Suwandi Feng Yin Juntao Wang Renjie Li Tsung-Hui Chang Sergios Theodoridis

تصميم نواة تكيفية لتحسين بايزي هو أمر سهل كتقطيع كعكة باستخدام نماذج اللغة الكبيرة

الملخص

تُعد كفاءة التحسين بايزي (BO) مرهونة بشكل كبير باختيار نواة عملية جاوسية (GP)، التي تؤدي دورًا محوريًا في تحقيق التوازن بين التوسع (الاستكشاف) والاستغلال ضمن ميزانيات تقييم محدودة. وغالبًا ما تعتمد الطرق التقليدية للتحسين بايزي على استراتيجيات ثابتة أو مبنية على تجربة لاختيار النواة، ما قد يؤدي إلى تباطؤ التقارب أو الحصول على حلول غير مثلى عند عدم ملاءمة النواة المختارة للدالة الهدف الكامنة. وللتغلب على هذه القيود، نقترح نموذجًا جديدًا يُسمى "تَطوُّر نواة واعية بالسياق" (CAKE) لتعزيز أداء التحسين بايزي باستخدام نماذج لغة كبيرة (LLMs). وبشكل محدد، يستخدم CAKE نماذج لغة كبيرة كعمليات تهجين وطفرة لاستنتاج وتحسين نواة عملية جاوسية بشكل تلقائي، استنادًا إلى البيانات الملاحظة طوال عملية التحسين. ولتحقيق أقصى استفادة من قدرات CAKE، نقترح أيضًا نموذج ترتيب نواة اكتساب (BAKER) يُحدِّد النواة الأكثر فعالية من خلال تحقيق توازن بين ملاءمة النموذج المُقاسة بمعيار المعلومات بايز (BIC) وزيادة القيمة المتوقعة في كل تكرار من تكرارات التحسين بايزي. وأظهرت تجارب واسعة النطاق أن طريقة التحسين بايزي المبنية على CAKE تتفوّق باستمرار على الطرق الأساسية المعتمدة في مجموعة متنوعة من المهام الواقعية، بما في ذلك تحسين المعلمات الفائقة، وضبط المُتحكمات، وتصميم أشباه الموصلات الضوئية.

بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — عجّل تطوير الذكاء الاصطناعي الخاص بك من خلال البرمجة المشتركة المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة المشتركة بالذكاء الاصطناعي
وحدات معالجة رسومات جاهزة
أفضل الأسعار
ابدأ الآن

Hyper Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
تصميم نواة تكيفية لتحسين بايزي هو أمر سهل كتقطيع كعكة باستخدام نماذج اللغة الكبيرة | الأوراق البحثية | HyperAI