SMPLicit: نموذج توليدي واعٍ بالطوبولوجيا لأشخاص ملثمين

في هذا البحث، نقدم "SMPLicit"، وهو نموذج توليدي جديد يمثل وضع الجسم، شكله وهندسة الملابس بشكل مشترك. على عكس النماذج القائمة على التعلم التي تتطلب تدريب نماذج محددة لكل نوع من أنواع الملابس، يمكن لـ "SMPLicit" تمثيل مختلف طوبولوجيات الملابس (مثل الأعلى بدون أكمام إلى السترات ذات الياقات وأغطية الرأس وحتى السترات المفتوحة) بطريقة موحدة، مع السيطرة على خصائص أخرى مثل حجم الملابس أو مدى ضيقها/رخاوة. نوضح قابلية استخدام نموذجنا في مجموعة واسعة من الملابس تشمل القمصان، السترات ذات الياقات وأغطية الرأس، المعاطف، السراويل القصيرة، البنطلونات، التنورات، الأحذية وحتى الشعر. يعتمد مرونة التمثيل في "SMPLicit" على نموذج ضمني مشروط بمعلمات جسم الإنسان SMPL ومساحة كامنة قابلة للتعلم والتي تكون قابلة للتفسير معنى وتتوافق مع خصائص الملابس. يعتبر النموذج المقترح قابلاً للتفاضل بالكامل، مما يتيح استخدامه في أنظمة أكبر قابلة للتدريب من النهاية إلى النهاية. في القسم التجريبي، نثبت إمكانية استخدام "SMPLicit" بسهولة لتناسب المسح الضوئي ثلاثي الأبعاد وإعادة بناء الصور ثلاثية الأبعاد للأشخاص الملبسين. في كلتا الحالتين، نتمكن من تجاوز الحالة المتقدمة للمعرفة باسترجاع هندسة الملابس المعقدة ومعالجة الحالات التي تحتوي على طبقات متعددة من الملابس وتقديم أداة لتحرير الإطلالة بسهولة. لتحفيز المزيد من البحث في هذا الاتجاه، سنقوم بتوفير رمزنا والنماذج بشكل عام عبر الرابط http://www.iri.upc.edu/people/ecorona/smplicit/.