منذ 2 أشهر
حل مشاكل التفكير الكمي باستخدام نماذج اللغة
Aitor Lewkowycz; Anders Andreassen; David Dohan; Ethan Dyer; Henryk Michalewski; Vinay Ramasesh; Ambrose Slone; Cem Anil; Imanol Schlag; Theo Gutman-Solo; Yuhuai Wu; Behnam Neyshabur; Guy Gur-Ari; Vedant Misra

الملخص
حققت نماذج اللغات أداءً ملحوظًا في مجموعة واسعة من المهام التي تتطلب فهم اللغة الطبيعية. ومع ذلك، فإن النماذج الرائدة غالبًا ما تواجه صعوبات في المهام التي تتطلب التفكير الكمي، مثل حل المشكلات في الرياضيات والعلوم والهندسة على مستوى الجامعة. لمساعدتنا في سد هذه الفجوة، نقدم "مينيرفا" (Minerva)، وهو نموذج لغة كبير تم تدريبه بشكل أولي على بيانات اللغة الطبيعية العامة ومن ثم تدريبه بشكل إضافي على المحتوى الفني. يحقق هذا النموذج أداءً رائدًا في مقاييس الأداء الفنية دون استخدام أدوات خارجية. كما قمنا بتقييم نموذجنا على أكثر من مئتي مشكلة جامعية في مجالات الفيزياء والأحياء والكيمياء والاقتصاد وغيرها من العلوم التي تتطلب التفكير الكمي، ووجدنا أن النموذج يمكنه الإجابة بشكل صحيح على حوالي ثلثها.