HyperAI

تجربة Deepfake "The Wandering Earth 2"، وو جينغ البالغ من العمر 45 عامًا "جعل" أصغر سناً، وتحول إلى شاب يبلغ من العمر 21 عامًا

特色图像

حقق فيلم "الأرض المتجولة 2" إيرادات تجاوزت 2.4 مليار يوان في 8 أيام فقط منذ عرضه، محطماً 36 رقماً قياسياً ومحققاً 91 إنجازاً مهماً. ومن بينهم الممثل الشاب البالغ من العمر 21 عامًا ليو بي تشيانغ (يلعبه وو جينغ) والشاب الوسيم تو هينغيو (يلعبه آندي لاو) اللذين تركا انطباعًا عميقًا لدى الجمهور.

تم نشر مقطع فيديو على الحساب الرسمي للعبة The Wandering Earth على موقع Weibo يصف الصعوبة الهندسية المعقدة وراء المؤثرات الخاصة لتغيير الوجه.

صورة

وو جينغ: لا تخف من وجهي الشاب والوسيم
المصدر: @The Wandering Earth Official Weibo

في سؤال على Zhihu بعنوان "ما هي تحديات الإنتاج غير المعروفة وراء كواليس فيلم "The Wandering Earth 2"؟"، اعترف Xu Jian، مشرف التأثيرات البصرية في فيلم "The Wandering Earth 2" ومؤسس MOREVFX، أن الصعوبة التقنية الأولى هي "إزالة الشيخوخة".

الإجابة الكاملة

مع تغير العصر الرقمي، تحول وو جينغ البالغ من العمر 45 عامًا إلى شاب وسيم يبلغ من العمر 21 عامًا

إزالة الشيخوخة هي تقنية المؤثرات البصرية المستخدمة في الأعمال السينمائية والتلفزيونية. يشير إلى استخدام التحرير الرقمي أو تقنية الرسومات الحاسوبية (CG) لجعل الممثلين يبدون أصغر سناً في مشاهد محددة.

في فيلم "الأرض المتجولة 2"، فإن الشخصيات التي يلعبها الممثلون وو جينغ، وآندي لاو، ووانغ تشي، والعديد من الآخرين، تنطوي جميعها على تجديد شباب الشخصيات، أي إزالة الشيخوخة.

صورة

تم تدريب نموذج الذكاء الاصطناعي باستخدام لقطات ثنائية الأبعاد لـ Wu Jing عندما كان صغيرًا لإجراء عمليات إزالة الشيخوخة وتغيير الوجه بالكامل للقطات الواقعية.

إضافة بسيطة: وفقًا لقصة الفيلم، وُلِد ليو بي تشيانغ في عام 2023.

خذ وو جينغ كمثال. في الواقع، كان وو جينغ يبلغ من العمر أكثر من 45 عامًا عند تصوير هذا الفيلم (حسب موسوعة بايدو)، لكن ليو بي تشيانغ كان يبلغ من العمر 21 عامًا فقط في عام 2044 في الفيلم. بالنسبة لممثل يزيد عمره عن 45 عامًا ليتحدى نفسه للعب دور شاب يبلغ من العمر 21 عامًا، فهو يحتاج حقًا إلى بعض الدعم الفني.

3 طرق رئيسية لإزالة الشيخوخة

في الواقع، كانت طرق مكافحة الشيخوخة السائدة في العالم في ذلك الوقت مقسمة إلى ثلاث فئات.

صورة

تتكون الطريقة من خطوتين رئيسيتين:

  • إنشاء البشر الرقميين وإزالة آثار الشيخوخة منهم

من خلال جهاز التقاط التعبير الذي يرتديه الممثل، يتم مسح الممثل ويتم إنشاء قاعدة بيانات لإنشاء شخص رقمي للممثل المستهدف. بعد ذلك، يتم تقليل عمر الشخص الرقمي استنادًا إلى الصور الثابتة ومقاطع الفيديو من بداية مسيرة الممثل.

  • رسوم متحركة للبشر الرقميين استنادًا إلى معدات التقاط الحركة التي يرتديها الممثلون

وقال شو جيان، مدير المؤثرات البصرية في فيلم "الأرض المتجولة 2"، إن هذه الطريقة تتطلب ميزانية عالية، وهناك نقص في المواهب ذات الصلة في الصين، وقد تؤثر المعدات الموجودة على الجسم على تصوير مشاهد القتال والتعبير عن مشاعر الممثلين.

صورة
يرتدي ويل سميث معدات لالتقاط الحركة والتعبير

صورة

في فيلم "الأيرلندي"، طورت شركة Industrial Light & Magic تقنية لإزالة الشيخوخة لا تتطلب ارتداء معدات مادية أو وضع علامات على الوجه. يحيط بالممثلين ثلاث كاميرات، واحدة للتصوير العادي، واثنتان أخريان لتسجيل البيانات اللازمة لإزالة الشيخوخة. يتم جمع البيانات اللازمة عن طريق إطلاق عدسات الأشعة تحت الحمراء لإعادة إنتاج الأداء رقميًا.

صورة
يتم دمج البيانات المسجلة بواسطة الكاميرا مع تأثير الضوء لتقليل عمر الشخصية.

صورة

في فيلم "كابتن أميركا 3: الحرب الأهلية"، استخدم فريق المؤثرات البصرية أعمال روبرت داوني جونيور السينمائية والتلفزيونية المبكرة والمواد البصرية لتدريب نموذج الذكاء الاصطناعي بناءً على خوارزمية Deepfake وإكمال تغيير الوجه.

صورة
نسخة شابة مزيفة من توني ستارك

وقال شو جيان، مدير المؤثرات البصرية في فيلم "الأرض المتجولة 2"، إن فريق المؤثرات البصرية بدأ التجارب الفنية قبل عام ونصف من بدء تصوير الفيلم. بعد اختبار 5 أو 6 طرق لتغيير الوجه، قرر فريق التأثيرات البصرية أخيرًا اعتماد طريقة إزالة الشيخوخة الثالثة. بالاعتماد على خوارزمية Deepfake، تم تدريب نموذج الذكاء الاصطناعي باستخدام مواد ثنائية الأبعاد للممثلين عندما كانوا صغارًا. بعد أكثر من 5 ملايين تكرار، تم استبدال المواد الحقيقية.

مراجعة الأبحاث حول تجديد شباب الوجه والشيخوخة

"إعادة شيخوخة الوجه الجاهز للإنتاج من أجل المؤثرات البصرية

واقترح فريق البحث في شركة ديزني شبكة إعادة شيخوخة الوجه، أو FRAN باختصار، والتي يمكنها إعادة تشكيل صور الوجه تلقائيًا في مقاطع الفيديو دون فقدان هويتها، وبالتالي تحقيق تأثير التجديد أو الشيخوخة على الوجه المستهدف.

صورة
عمر الصورة المدخلة هو 35 عامًا، والصفوف العلوية والسفلية هي 65 عامًا و18 عامًا على التوالي

"تحرير عمر الوجه بدقة عالية"

تقترح هذه الورقة بنية تشفير وفك تشفير لتحرير عمر الوجه، والتي تستخدم طريقة بسيطة لتحقيق تحرير عمر الوجه بدقة عالية ويمكنها إخراج صور بدقة 1024 * 1024.

صورة
بناءً على وجه الإدخال (الإطار الأصفر)، يتم إخراج صور وجوه عالية الجودة لمجموعات عمرية مختلفة

"مسألة أسلوب فقط: تحويل العمر باستخدام نموذج الانحدار القائم على الأسلوب"

تقترح هذه الورقة طريقة ترجمة من صورة إلى صورة تقوم بتشفير صور الوجه الحقيقية مباشرة في المساحة الكامنة لشبكة GAN غير مشروطة مدربة مسبقًا لتحويل الشيخوخة. من خلال صورة واحدة فقط للموضوع، من الممكن توليد ملامح الوجه لجميع الأعمار، بدقة لكل تجعد.

صورة
نتائج الشيخوخة الناتجة عن استخدام بنية SAM المقترحة في الورقة

لا تزال تقنية تغيير الوجه على مستوى البكسل بحاجة إلى طريق طويل لتقطعه ولا تزال بحاجة إلى معايير الصناعة

في فيلم "The Wandering Earth 2"، يعتمد عرض الشابين Liu Peiqiang و Tu Hengyu على خوارزمية Deepfake. ومع ذلك، من خلال فحص العديد من الأوراق ذات الصلة والجمع بين تقديم مدير التأثيرات البصرية Xu Jian، تعلمنا أنه في المرحلة اللاحقة من إنتاج الفيلم، لا تزال هناك حاجة إلى موظفين محترفين في مرحلة ما بعد الإنتاج لإجراء تحسينات وإصلاحات معقدة على الشخصيات بعد تغيير الوجه.

ويرجع ذلك إلى أن تقنية تغيير الوجه لا تزال تعاني من بعض القصور في معالجة بعض التفاصيل، مثل التعبيرات الجامدة وتعبيرات العين غير الطبيعية. لا شك أن هذه "التناقضات" سوف تتضخم على شاشة السينما الكبيرة، مما يسبب إزعاجاً للجمهور.

لا يزال أمام تطوير خوارزميات إزالة الشيخوخة والشيخوخة طريق طويل قبل أن تتمكن من تحقيق "التكيف المثالي" مع الشخصيات في الأعمال السينمائية والتلفزيونية. إن كيفية مراقبة إساءة استخدام تقنية Deepfake تشكل أيضًا خطرًا وتحديًا محتملًا يتعين على الصناعة ومجتمع التكنولوجيا وحتى المستخدمين العاديين مواجهته. أنا متحمس جدًا لرؤية مثل هذا التصميم الرائع للمشهد والمؤثرات البصرية في فيلم خيال علمي محلي. أنا أتطلع إلى Little Broken Ball 3!

المراجع: [1] https://www.zhihu.com/question/579613527 [2] https://onlinelibrary.wiley.com/doi/full/10.1111/oli.12302 [3] https://www.respeecher.com/blog/de-aging-technology-changing-hollywood-future-film-making

نظرة عامة على المحتوى: في فيلم الخيال العلمي "الأرض المتجولة 2" لمهرجان الربيع، تمتد الشخصيات التي يلعبها نجوم وو جينغ وآندي لاو وشا يي وآخرون على مدار 14 عامًا. استخدم فريق المؤثرات البصرية تقنية Deepfake لإزالة الشيخوخة لتقديم مظهر الممثلين في أعمار مختلفة.
الكلمات المفتاحية: إزالة الشيخوخة بتقنية Deepfake، الأرض المتجولة

حقق فيلم "الأرض المتجولة 2" إيرادات تجاوزت 2.4 مليار يوان في 8 أيام فقط منذ عرضه، محطماً 36 رقماً قياسياً ومحققاً 91 إنجازاً مهماً. ومن بينهم الممثل الشاب البالغ من العمر 21 عامًا ليو بي تشيانغ (يلعبه وو جينغ) والشاب الوسيم تو هينغيو (يلعبه آندي لاو) اللذين تركا انطباعًا عميقًا لدى الجمهور.

تم نشر مقطع فيديو على الحساب الرسمي للعبة The Wandering Earth على موقع Weibo يصف الصعوبة الهندسية المعقدة وراء المؤثرات الخاصة لتغيير الوجه.

صورة

وو جينغ: لا تخف من وجهي الشاب والوسيم
المصدر: @The Wandering Earth Official Weibo

في سؤال على Zhihu بعنوان "ما هي تحديات الإنتاج غير المعروفة وراء كواليس فيلم "The Wandering Earth 2"؟"، اعترف Xu Jian، مشرف التأثيرات البصرية في فيلم "The Wandering Earth 2" ومؤسس MOREVFX، أن الصعوبة التقنية الأولى هي "إزالة الشيخوخة".

الإجابة الكاملة

مع تغير العصر الرقمي، تحول وو جينغ البالغ من العمر 45 عامًا إلى شاب وسيم يبلغ من العمر 21 عامًا

إزالة الشيخوخة هي تقنية المؤثرات البصرية المستخدمة في الأعمال السينمائية والتلفزيونية. يشير إلى استخدام التحرير الرقمي أو تقنية الرسومات الحاسوبية (CG) لجعل الممثلين يبدون أصغر سناً في مشاهد محددة.

في فيلم "الأرض المتجولة 2"، فإن الشخصيات التي يلعبها الممثلون وو جينغ، وآندي لاو، ووانغ تشي، والعديد من الآخرين، تنطوي جميعها على تجديد شباب الشخصيات، أي إزالة الشيخوخة.

صورة

تم تدريب نموذج الذكاء الاصطناعي باستخدام لقطات ثنائية الأبعاد لـ Wu Jing عندما كان صغيرًا لإجراء عمليات إزالة الشيخوخة وتغيير الوجه بالكامل للقطات الواقعية.

إضافة بسيطة: وفقًا لقصة الفيلم، وُلِد ليو بي تشيانغ في عام 2023.

خذ وو جينغ كمثال. في الواقع، كان وو جينغ يبلغ من العمر أكثر من 45 عامًا عند تصوير هذا الفيلم (حسب موسوعة بايدو)، لكن ليو بي تشيانغ كان يبلغ من العمر 21 عامًا فقط في عام 2044 في الفيلم. بالنسبة لممثل يزيد عمره عن 45 عامًا ليتحدى نفسه للعب دور شاب يبلغ من العمر 21 عامًا، فهو يحتاج حقًا إلى بعض الدعم الفني.

3 طرق رئيسية لإزالة الشيخوخة

في الواقع، كانت طرق مكافحة الشيخوخة السائدة في العالم في ذلك الوقت مقسمة إلى ثلاث فئات.

صورة

تتكون الطريقة من خطوتين رئيسيتين:

  • إنشاء البشر الرقميين وإزالة آثار الشيخوخة منهم

من خلال جهاز التقاط التعبير الذي يرتديه الممثل، يتم مسح الممثل ويتم إنشاء قاعدة بيانات لإنشاء شخص رقمي للممثل المستهدف. بعد ذلك، يتم تقليل عمر الشخص الرقمي استنادًا إلى الصور الثابتة ومقاطع الفيديو من بداية مسيرة الممثل.

  • رسوم متحركة للبشر الرقميين استنادًا إلى معدات التقاط الحركة التي يرتديها الممثلون

وقال شو جيان، مدير المؤثرات البصرية في فيلم "الأرض المتجولة 2"، إن هذه الطريقة تتطلب ميزانية عالية، وهناك نقص في المواهب ذات الصلة في الصين، وقد تؤثر المعدات الموجودة على الجسم على تصوير مشاهد القتال والتعبير عن مشاعر الممثلين.

صورة
يرتدي ويل سميث معدات لالتقاط الحركة والتعبير

صورة

في فيلم "الأيرلندي"، طورت شركة Industrial Light & Magic تقنية لإزالة الشيخوخة لا تتطلب ارتداء معدات مادية أو وضع علامات على الوجه. يحيط بالممثلين ثلاث كاميرات، واحدة للتصوير العادي، واثنتان أخريان لتسجيل البيانات اللازمة لإزالة الشيخوخة. يتم جمع البيانات اللازمة عن طريق إطلاق عدسات الأشعة تحت الحمراء لإعادة إنتاج الأداء رقميًا.

صورة
يتم دمج البيانات المسجلة بواسطة الكاميرا مع تأثير الضوء لتقليل عمر الشخصية.

صورة

في فيلم "كابتن أميركا 3: الحرب الأهلية"، استخدم فريق المؤثرات البصرية أعمال روبرت داوني جونيور السينمائية والتلفزيونية المبكرة والمواد البصرية لتدريب نموذج الذكاء الاصطناعي بناءً على خوارزمية Deepfake وإكمال تغيير الوجه.

صورة
نسخة شابة مزيفة من توني ستارك

وقال شو جيان، مدير المؤثرات البصرية في فيلم "الأرض المتجولة 2"، إن فريق المؤثرات البصرية بدأ التجارب الفنية قبل عام ونصف من بدء تصوير الفيلم. بعد اختبار 5 أو 6 طرق لتغيير الوجه، قرر فريق التأثيرات البصرية أخيرًا اعتماد طريقة إزالة الشيخوخة الثالثة. بالاعتماد على خوارزمية Deepfake، تم تدريب نموذج الذكاء الاصطناعي باستخدام مواد ثنائية الأبعاد للممثلين عندما كانوا صغارًا. بعد أكثر من 5 ملايين تكرار، تم استبدال المواد الحقيقية.

مراجعة الأبحاث حول تجديد شباب الوجه والشيخوخة

"إعادة شيخوخة الوجه الجاهز للإنتاج من أجل المؤثرات البصرية

واقترح فريق البحث في شركة ديزني شبكة إعادة شيخوخة الوجه، أو FRAN باختصار، والتي يمكنها إعادة تشكيل صور الوجه تلقائيًا في مقاطع الفيديو دون فقدان هويتها، وبالتالي تحقيق تأثير التجديد أو الشيخوخة على الوجه المستهدف.

صورة
عمر الصورة المدخلة هو 35 عامًا، والصفوف العلوية والسفلية هي 65 عامًا و18 عامًا على التوالي

"تحرير عمر الوجه بدقة عالية"

تقترح هذه الورقة بنية تشفير وفك تشفير لتحرير عمر الوجه، والتي تستخدم طريقة بسيطة لتحقيق تحرير عمر الوجه بدقة عالية ويمكنها إخراج صور بدقة 1024 * 1024.

صورة
بناءً على وجه الإدخال (الإطار الأصفر)، يتم إخراج صور وجوه عالية الجودة لمجموعات عمرية مختلفة

"مسألة أسلوب فقط: تحويل العمر باستخدام نموذج الانحدار القائم على الأسلوب"

تقترح هذه الورقة طريقة ترجمة من صورة إلى صورة تقوم بتشفير صور الوجه الحقيقية مباشرة في المساحة الكامنة لشبكة GAN غير مشروطة مدربة مسبقًا لتحويل الشيخوخة. من خلال صورة واحدة فقط للموضوع، من الممكن توليد ملامح الوجه لجميع الأعمار، بدقة لكل تجعد.

صورة
نتائج الشيخوخة الناتجة عن استخدام بنية SAM المقترحة في الورقة

لا تزال تقنية تغيير الوجه على مستوى البكسل بحاجة إلى طريق طويل لتقطعه ولا تزال بحاجة إلى معايير الصناعة

في فيلم "The Wandering Earth 2"، يعتمد عرض الشابين Liu Peiqiang و Tu Hengyu على خوارزمية Deepfake. ومع ذلك، من خلال فحص العديد من الأوراق ذات الصلة والجمع بين تقديم مدير التأثيرات البصرية Xu Jian، تعلمنا أنه في المرحلة اللاحقة من إنتاج الفيلم، لا تزال هناك حاجة إلى موظفين محترفين في مرحلة ما بعد الإنتاج لإجراء تحسينات وإصلاحات معقدة على الشخصيات بعد تغيير الوجه.

ويرجع ذلك إلى أن تقنية تغيير الوجه لا تزال تعاني من بعض القصور في معالجة بعض التفاصيل، مثل التعبيرات الجامدة وتعبيرات العين غير الطبيعية. لا شك أن هذه "التناقضات" سوف تتضخم على شاشة السينما الكبيرة، مما يسبب إزعاجاً للجمهور.

لا يزال أمام تطوير خوارزميات إزالة الشيخوخة والشيخوخة طريق طويل قبل أن تتمكن من تحقيق "التكيف المثالي" مع الشخصيات في الأعمال السينمائية والتلفزيونية. إن كيفية مراقبة إساءة استخدام تقنية Deepfake تشكل أيضًا خطرًا وتحديًا محتملًا يتعين على الصناعة ومجتمع التكنولوجيا وحتى المستخدمين العاديين مواجهته. أنا متحمس جدًا لرؤية مثل هذا التصميم الرائع للمشهد والمؤثرات البصرية في فيلم خيال علمي محلي. أنا أتطلع إلى Little Broken Ball 3!

المراجع: [1] https://www.zhihu.com/question/579613527 [2] https://onlinelibrary.wiley.com/doi/full/10.1111/oli.12302 [3] https://www.respeecher.com/blog/de-aging-technology-changing-hollywood-future-film-making