HyperAIHyperAI

Command Palette

Search for a command to run...

الملخص التحليلي متعدد الوسائط لمقاطع الفيديو How2

Shruti Palaskar; Jindrich Libovický; Spandana Gella; Florian Metze

الملخص

في هذا البحث، ندرس تلخيص الاستخلاص لمقاطع الفيديو المفتوحة. على عكس تلخيص الأخبار النصية التقليدية، فإن الهدف يكمن أقل في "ضغط" المعلومات النصية وأكثر في تقديم ملخص نصي سلس للمعلومات التي تم جمعها ودمجها من مصادر مختلفة، وفي حالتنا هذه، الفيديو والنصوص الصوتية (أو النص). نوضح كيف يمكن لموديل متعدد المصادر مع انتباه هرمي دمج المعلومات من مصادر مختلفة في إخراج متماسك، نقارن بين مختلف الموديلات التي تم تدريبها باستخدام مصادر مختلفة، ونقدم تجارب أولية على مجموعة بيانات How2 للفيديوهات التعليمية. كما نقترح مؤشراً تقييمياً جديداً (F1 المحتوى) لمهمة تلخيص الاستخلاص يقيس الكفاية الدلالية بدلاً من سلاسة الملخصات، والتي يتم تغطيتها بواسطة المؤشرات مثل ROUGE وBLEU.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp