HyperAI

Depth Pro: خطوة جديدة في تقدير العمق

Depth Pro: احصل على قياسات عمق أحادية العين واضحة في أقل من ثانية

1. مقدمة البرنامج التعليمي

Depth Pro هو نموذج أساسي لتقدير عمق أحادي العدسة المتري بدون لقطة، وقد تم توفيره مفتوح المصدر بواسطة Apple في أكتوبر 2024. نتائج الورقة ذات الصلة هي "Depth Pro: عمق متري أحادي العين حاد في أقل من ثانيةبقلم أليكسي بوشكوفسكي، وأمايل ديلونوي، وهوغو جيرمان، ومارسيل سانتوس، وييتشاو تشو، وستيفان آر ريختر، وفلادلين كولتون.

ينشئ Depth Pro بسرعة خرائط عمق ثلاثية الأبعاد عالية الدقة من صورة ثنائية الأبعاد واحدة. لا يعد هذا النموذج سريعًا فحسب، حيث يستغرق 0.3 ثانية فقط، بل يوفر أيضًا معلومات العمق على مستوى القياس، كما أن خرائط العمق المولدة لها مقياس حقيقي في العالم الحقيقي. لا تعتمد ميزة Depth Pro على المعلمات الداخلية للكاميرا، مثل البعد البؤري، وهي متعددة الاستخدامات للغاية. إنها تتميز بقدرتها على التقاط تفاصيل الحدود ويمكنها تصوير الهياكل الدقيقة مثل الشعر والنباتات بوضوح. تتمتع تقنية Depth Pro بالقدرة على التعلم من الصفر، مما يعني أنها قادرة على تقديم تنبؤات دقيقة دون أي تدريب خاص بالبيانات في مجال معين، مما يمنحها إمكانات تطبيق واسعة في مجالات متعددة مثل الواقع المعزز وإعادة البناء ثلاثي الأبعاد وتحرير الصور.

تتضمن الميزات الرئيسية لـ Depth Pro ما يلي:

  • تقدير عمق المقياس بدون لقطة: إنشاء خريطة عمق مترية بمقياس مطلق من صورة ثنائية الأبعاد واحدة بدون معلمات كاميرا جوهرية.
  • مخرجات عالية الدقة: يمكن للنموذج إنشاء خرائط عمق تصل إلى 2.25 ميجابكسل، مما يوفر تفاصيل غنية.
  • معالجة سريعة: على وحدة معالجة الرسومات القياسية، يقوم Depth Pro بإنشاء خريطة عمق في 0.3 ثانية، وهي مناسبة للتطبيقات في الوقت الفعلي.
  • التقاط التفاصيل: فهو جيد بشكل خاص في التقاط الهياكل الدقيقة مثل الشعر والنباتات، وتحسين وضوح الحدود.

من حيث المبادئ التقنية، يعتمد Depth Pro على بنية محول بصري متعدد المقاييس (ViT) فعالة تلتقط سياق الصورة العالمية مع تحديد الهياكل الدقيقة بدقة عالية. يتم تدريبه على مجموعة من مجموعات البيانات الحقيقية والاصطناعية لتحقيق مقاييس عالية الدقة وتتبع الحدود التفصيلي. وتقوم تقنية Depth Pro أيضًا بتقدير الطول البؤري من صورة واحدة، مما يجعلها رائدة في مجال تقدير الطول البؤري بدون عينة. علاوة على ذلك، فهو يعتمد على استراتيجية تدريب من مرحلتين، حيث تهدف المرحلة الأولى إلى تعلم الميزات القوية عبر المجالات، بينما تركز المرحلة الثانية على شحذ الحدود وكشف التفاصيل الدقيقة في خريطة العمق المتوقعة.

معاينة التأثير

2. خطوات التشغيل

بعد بدء تشغيل الحاوية، انقر فوق عنوان API للدخول إلى واجهة الويب

تركيب خريطة العمق عالية الدقة

هناك معامِلان للاختيار من بينهما أثناء عملية التوليد

  • التدوير التلقائي: التدوير التلقائي
  • إزالة ألفا: إزالة ألفا

قم بتحميل صورة أو حدد عينة حسب الطلب

إنشاء عرض النتائج
الشكل 1 عرض توضيحي لتوليف خريطة العمق عالية الدقة

التبادل والمناقشة

🖌️ إذا رأيت مشروعًا عالي الجودة، فيرجى ترك رسالة في الخلفية للتوصية به! بالإضافة إلى ذلك، قمنا أيضًا بتأسيس مجموعة لتبادل الدروس التعليمية. مرحبًا بالأصدقاء لمسح رمز الاستجابة السريعة وإضافة [برنامج تعليمي SD] للانضمام إلى المجموعة لمناقشة المشكلات الفنية المختلفة ومشاركة نتائج التطبيق↓