يوفر استخدام مقطع فيديو تم تصويره من زوايا مختلفة في Neuralangelo العديد من المزايا المهمة لإعادة الإعمار ثلاثي الأبعاد:
1. تصور العمق المحسن: من خلال التقاط مشهد أو كائن من وجهات نظر متعددة ، يمكن لـ Neuralangelo فهم العمق والعلاقات المكانية بشكل أفضل داخل المشهد. يتيح هذا النهج متعدد الزوايا لمنظمة العفو الدولية تحديد موضع الكاميرا بدقة لكل إطار ، وهو أمر بالغ الأهمية لإنشاء تمثيل ثلاثي الأبعاد دقيق [3] [4].
2. تحسين الملمس والتقاط الأنماط: يتفوق Neuralangelo على التقاط أنماط الملمس المتكررة ، والألوان المتجانسة ، وتغيرات الألوان القوية "حيث تكافح نماذج الذكاء الاصطناعى السابقة. يساعد استخدام لقطات الفيديو من زوايا مختلفة في تقديم هذه القوام والأنماط المعقدة بدقة ، مما يؤدي إلى نماذج ثلاثية الأبعاد أكثر واقعية ومفصلة [4] [10].
3. إعادة بناء العالية: يتيح نهج العرض متعدد الأهداف من Neuralangelo إعادة بناء الهياكل السطحية ثلاثية الأبعاد الكثيفة بإخلاص يتجاوز الطرق السابقة. هذا يعني أن النماذج ثلاثية الأبعاد الناتجة مفصلة ودقيقة للغاية ، مما يجعلها مناسبة للتطبيقات مثل ألعاب الفيديو والروبوتات والتوأم الرقمي [1] [5].
4. التنوع في حجم المشهد: يمكن لـ Neuralangelo التعامل مع كل من المشاهد التي تركز على الكائنات الصغيرة والبيئات الداخلية أو الخارجية على نطاق واسع. تتيح القدرة على معالجة الفيديو من زوايا مختلفة إعادة بناء نماذج مفصلة للمشاهد المعقدة ، مثل المباني أو المناظر الطبيعية ، بدقة عالية [7] [10].
5. الكفاءة وإمكانية الوصول: يؤدي استخدام لقطات الفيديو إلى تبسيط عملية جمع البيانات مقارنة بطرق قياس التصوير التقليدي ، والتي تتطلب في كثير من الأحيان عددًا كبيرًا من الصور الثابتة المأخوذة من زوايا دقيقة. تجعل قدرة Neuralangelo على العمل مع الفيديو أكثر سهولة وفعالية للمستخدمين ، حيث يمكنها معالجة لقطات من أجهزة مثل الهواتف الذكية أو الطائرات بدون طيار [10] [11].
6. التحسين والتحسين: بعد إنشاء تمثيل ثلاثي الأبعاد أولي ، يعمل Neuralangelo على تحسين النموذج ويصرفه عن طريق شحذ التفاصيل. تضمن عملية التحسين هذه ، التي تسهلها إدخال الفيديو متعدد الزوايا ، أن يكون النموذج ثلاثي الأبعاد النهائي دقيقًا للغاية وجذابًا بصريًا [3] [4].
بشكل عام ، يعزز استخدام الفيديو الذي تم تصويره من زوايا مختلفة في Neuralangelo دقة وتفاعلات إعادة البناء ثلاثية الأبعاد ، مما يجعلها أداة قوية لمجموعة واسعة من التطبيقات.
الاستشهادات:[1 "
[2]
[3]
[4]
[5] https://research.nvidia.com/labs/dir/neuralangelo/
[6] https://ozgungenc.substack.com/p/neural-graphics-neuralangelo
[7]
[8] https://arxiv.org/html/2407.20868v1
[9] https://research.nvidia.com/labs/dir/neuralangelo/paper.pdf
[10] https://www.geweeknews.com/news/nvidia-neuralangelo-open-source-3d-models-nerf
[11] https://www.aiworldtoday.net/p/neuralangelo-ai-turns-iphone-videos-to-3d-models