HyperAI

عرض توضيحي لإنشاء فيديو بشري افتراضي بطول غير محدود من MuseV

مقدمة المشروع

MuseV  إنه إطار عمل لإنشاء مقاطع فيديو بشرية افتراضية مفتوح المصدر تم إنشاؤه بواسطة مختبر Tianqin التابع لشركة Tencent Music Entertainment في مارس 2024، مع التركيز على إنشاء مقاطع فيديو بشرية افتراضية عالية الجودة ومزامنة الشفاه. يستخدم خوارزميات متقدمة لإنتاج محتوى فيديو طويل بتناسق عالٍ وتعبيرات طبيعية. يمكن دمجه مع المنشور بالفعل ميوز توك  من خلال استخدامها معًا، من الممكن إنشاء "حل إنساني افتراضي" كامل.

يتمتع النموذج بالميزات التالية:

  1. إنه يدعم استخدام مخطط إزالة الضوضاء المتوازية الشرطية البصرية الجديد لتوليد طول لا نهائي دون مشكلة تراكم الأخطاء، وهو مناسب بشكل خاص للمشاهد ذات مواضع الكاميرا الثابتة.
  2. يتم توفير نموذج مدرب مسبقًا لإنشاء فيديو بشري افتراضي يعتمد على مجموعة بيانات نوع الحرف.
  3. يدعم إنشاء الصور إلى الفيديو، والنص إلى الصورة إلى الفيديو، والفيديو إلى الفيديو.
  4. متناسق Stable Diffusion يتضمن نظام توليد النصوص والصور ما يلي: base_model ، lora ، controlnet انتظر.
  5. يدعم تقنيات الصورة المرجعية المتعددة، بما في ذلك IPAdapter ، ReferenceOnly ، ReferenceNet ، IPAdapterFaceID .

عرض التأثير

يتم إنشاء جميع الإطارات التي تولد النتائج مباشرة بواسطة MuseV  تم إنشاؤها دون أي معالجة لاحقة مثل الدقة الفائقة الزمنية أو الدقة الفائقة المكانية.

يمكن تنفيذ جميع حالات الاختبار التالية في هذا البرنامج التعليمي. يستغرق إنشاء مقطع فيديو مدته 7 ثوانٍ حوالي دقيقتين ونصف. أطول فيديو تم اختباره هو 20 ثانية ويستغرق 8 دقائق.

عرض تأثير الشخصية

صورةفيديواِسْتَدْعَى
(تحفة فنية، أفضل جودة، دقة عالية: 1)، مشهد بحري جميل وهادئ
(تحفة فنية، أفضل جودة، دقة عالية: 1)، يعزف على الجيتار
(تحفة فنية، أفضل جودة، دقة عالية: 1)، يعزف على الجيتار

عرض تأثير المشهد

صورةفيديواِسْتَدْعَى
(تحفة فنية، أفضل جودة، دقة عالية: 1)، شلال هادئ جميل، شلال لا نهاية له
(تحفة فنية، أفضل جودة، دقة عالية: 1)، مشهد بحري جميل وهادئ

إنشاء مقاطع فيديو من مقاطع الفيديو الموجودة

صورةفيديواِسْتَدْعَى
(تحفة فنية، أفضل جودة، دقة عالية: 1)، رقص، رسوم متحركة

خطوات التشغيل

1. ابحث عن زر "استنساخ" في الزاوية اليمنى العليا من هذا البرنامج التعليمي. بعد النقر فوق "استنساخ"، استخدم مباشرةً تكوين النظام الأساسي الافتراضي لإنشاء حاوية. انتظر حتى يتم تنفيذ الحاوية وبدء تشغيلها بنجاح، وبعد ذلك ستظهر لك الصفحة الموضحة في الشكل أدناه. اتبع الإرشادات الموجودة في الشكل للدخول إلى واجهة تشغيل المشروع.

❗ملاحظة❗ نظرًا لأن النموذج كبير الحجم، فقد يستغرق تحميل النموذج دقيقة واحدة تقريبًا بعد بدء تشغيل الحاوية بنجاح قبل أن يتم فتح عنوان API.

2. يتم شرح استخدام الصفحة على النحو التالي:

التبادل والمناقشة

🖌️ إذا رأيت مشروعًا عالي الجودة، فيرجى ترك رسالة في الخلفية للتوصية به! بالإضافة إلى ذلك، قمنا أيضًا بتأسيس مجموعة لتبادل الدروس التعليمية. مرحبًا بالأصدقاء لمسح رمز الاستجابة السريعة وإضافة [برنامج تعليمي SD] للانضمام إلى المجموعة لمناقشة المشكلات الفنية المختلفة ومشاركة نتائج التطبيق↓

1