HyperAI

عرض تجريبي لإنشاء صور على طراز Ghibli من EasyControl

أمثلة التأثير

1. مقدمة البرنامج التعليمي

EasyControl هو مشروع يهدف إلى إضافة تحكم فعال ومرن إلى محول الانتشار. تم تطويره بشكل مشترك من قبل شركة Tiamat AI وجامعة شنغهاي للتكنولوجيا والجامعة الوطنية في سنغافورة وLiblib AI في عام 2025. نتائج الورقة ذات الصلة هي "EasyControl: إضافة تحكم فعال ومرن لمحول الانتشارمع تحول بنية نموذج الانتشار من بنية قائمة على Unet إلى محول انتشار (DiT)، يفتقر نظام DiT الحالي إلى دعم المكونات الإضافية، ويواجه مشاكل مثل اختناقات الكفاءة، وتعارضات تنسيق الشروط المتعددة، وعدم كفاية قدرة النموذج على التكيف. لمعالجة هذه المشاكل، تقترح EasyControl إطار عمل DiT مشروطًا موحدًا فعالًا ومرنًا. من خلال إدخال وحدات LoRA خفيفة الوزن للحقن الشرطي، ونماذج تدريب تعتمد على الموقع، والجمع بين آليات الانتباه السببي وتقنية ذاكرة التخزين المؤقت KV، يُحسّن EasyControl توافق النموذج بشكل كبير، ويدعم وظيفة التوصيل والتشغيل، والتحكم في النمط بدون فقدان؛ وفي الوقت نفسه، يُعزز مرونة التوليد، ويمكنه دعم دقة متعددة، ونسب أبعاد، ومجموعات شروط متعددة؛ ويُحسّن كفاءة الاستدلال، مما يجعل النموذج أكثر كفاءة في وقت التشغيل.

يستخدم هذا البرنامج التعليمي نموذج التحكم Img2Img المصمم، والذي يمكنه تحويل الصور الشخصية إلى أعمال فنية على طراز Hayao Miyazaki، تم تدريبه باستخدام 100 وجه آسيوي حقيقي فقط وصور Ghibli المقابلة المولدة بواسطة GPT-4o، مع الحفاظ على ملامح الوجه وتطبيق جماليات الأنمي الشهيرة. بالإضافة إلى ذلك، تعاونت EasyControl مع فريق CFG-Zero لتحسين دقة الصورة وإمكانية التحكم فيها بشكل أكبر. ويخطط الفريق أيضًا لمواصلة تحسين أداء النموذج واستكشاف المزيد من سيناريوهات التطبيق. في المستقبل، قد يتم إصدار المزيد من الأوزان المدربة مسبقًا وأكواد التدريب لدعم المزيد من الأبحاث والتطوير في المجتمع.

يستخدم هذا البرنامج التعليمي EasyControl كعرض توضيحي، ويستخدم مورد الحوسبة A6000.

2. خطوات التشغيل

1. بعد بدء تشغيل الحاوية، انقر فوق عنوان API للدخول إلى واجهة الويب

إذا تم عرض "BadGateway"، فهذا يعني أن النموذج قيد التهيئة. نظرًا لأن النموذج كبير الحجم، يرجى الانتظار لمدة 1-2 دقيقة وتحديث الصفحة.

2. بمجرد دخولك إلى الموقع، يمكنك البدء في استخدامه

كيفية الاستخدام

العرض التوضيحي

التبادل والمناقشة

🖌️ إذا رأيت مشروعًا عالي الجودة، فيرجى ترك رسالة في الخلفية للتوصية به! بالإضافة إلى ذلك، قمنا أيضًا بتأسيس مجموعة لتبادل الدروس التعليمية. مرحبًا بالأصدقاء لمسح رمز الاستجابة السريعة وإضافة [برنامج تعليمي SD] للانضمام إلى المجموعة لمناقشة المشكلات الفنية المختلفة ومشاركة نتائج التطبيق↓