renderformer: نظام جديد لرسم الصور ثلاثية الأبعاد بتأثيرات الإنارة العامة دون الحاجة لتخصيص كل مشهد

نقدم RenderFormer، وهو أنبوب توصيل للرسومات العصبية قادر على إنتاج صورة مباشرة من تمثيل مشهد باستخدام شبكة المثلثات مع تأثيرات الإضاءة العالمية الكاملة، دون الحاجة إلى تدريب أو ضبط فائن للمشهد. بدلاً من اتباع منهجية مركزة على الفيزياء في الرسومات، تم تصميم RenderFormer كعملية تحويل من سلسلة إلى سلسلة حيث يتم تحويل سلسلة من الرموز التي تمثل المثلثات والمحمولة على خواص الانعكاس إلى سلسلة من الرموز الخرج التي تمثل بقع صغيرة من البكسلات. يعتمد RenderFormer على أنبوب توصيل ذو مرحلتين: المرحلة الأولى مستقلة عن الرؤية وتهدف إلى نمذجة نقل الضوء بين المثلثات، بينما الهدف من المرحلة الثانية هو تحويل الرمز الذي يمثل حزمة من الأشعة الضوئية إلى قيم البكسل المناسبة، وهي مرحلة تتأثر بتوجيهات من المرحلة الأولى المستقلة عن الرؤية. كلا المرحلتين مبنيان على البنية المتغيرة (transformer architecture) ويتم تعلميهما مع قيود أولية قليلة جداً. هذا يعني أن العملية لا تتضمن أي نوع من التصوير (rasterization) أو تتبع الأشعة (ray tracing). معرض الرسومات يُظهر معرض الرسومات العديد من أمثلة المشاهد التي تم رسمها باستخدام RenderFormer، والتي توضح ظروف الإضاءة المختلفة، المواد، والتعقيد الهندسي، وكل ذلك دون أي تدريب أو ضبط فائن خاص بالمشهد. لمزيد من التفاصيل، يمكنك الرجوع إلى الصور المرجعية.