مجموعة بيانات ضبط التعليمات متعددة الصور Mantis-Instruct

تم إصدار مجموعة بيانات Mantis-Instruct في عام 2024 من قبل جامعة واترلو وجامعة تسينغهوا ومختبر الذكاء الاصطناعي في شنغهاي.MANTIS: ضبط تعليمات الصور المتعددة المتداخلةمجموعة بيانات متعددة الوسائط متداخلة بين النصوص والصور، تُركز على الضبط الدقيق لتعليمات الصور المتعددة، وتتألف من 14 مجموعة فرعية تحتوي على 721 ألف مثال، تُستخدم لتدريب عائلة نماذج مانتيس. تغطي مجموعة البيانات مجموعة متنوعة من مهارات الصور المتعددة، بما في ذلك الإحالة المشتركة، والاستدلال، والمقارنة، والفهم الزمني. لا تقتصر المجموعة على 10 مجموعات فرعية من مجموعات البيانات الحالية، بل تضيف أيضًا 4 مجموعات بيانات مُعدّة حديثًا مُصممة لتوسيع مهارات الاستدلال في النموذج ومهارات الصور المتعددة الأخرى.