اختيار المفاهيم المتميزة بالوعي بالمعرفة البديهية لسرد قصص مرئية متنوعة وغنية بالمعلومات

السرد البصري هو مهمة توليد قصص ذات صلة ومشوقة لسلسلة صور معطاة. في هذا العمل، نهدف إلى زيادة تنوع القصص المولدة مع الحفاظ على المحتوى المعلوماتي المستمد من الصور. نقترح تعزيز تنوع القصة المولدة و informativeness من خلال استخدام وحدة اختيار المفاهيم التي تقترح مجموعة من المرشحات المفاهيمية. ثم نستخدم نموذجًا مُدرَّبًا مسبقًا على نطاق واسع لتحويل المفاهيم والصور إلى قصص كاملة. ولتغذية المرشحات المفاهيمية، تم إنشاء رسم معرفي للمنطق العام لكل سلسلة صور، من خلاله تُقترح المرشحات المفاهيمية. وللحصول على مفاهيم مناسبة من الرسم، نقترح وحدتين جديدتين تأخذان بعين الاعتبار الترابط بين المرشحات المفاهيمية والارتباط بين الصورة والمفهوم. أظهرت نتائج التقييم التلقائي والبشري الواسعة أن نموذجنا قادر على إنتاج مفاهيم منطقية. هذا يمكّن نموذجنا من التفوق على النماذج السابقة بشكل كبير من حيث تنوع القصة وغناها بالمعلومات، مع الحفاظ على صلة القصة بالسلسلة الصورية.