اقتصاد وعملات

يمكن لنموذج الذكاء الاصطناعي من NVIDIA إنشاء نماذج ثلاثية الأبعاد من أوصاف النص

ثلاثي الأبعاد لجميع المستخدمين؟ يمكن لـ Magic3D من Nvidia إنشاء نماذج ثلاثية الأبعاد من النص.

قدم باحثو Nvidia Magic3D يوم الجمعة ، وهو نظام ذكاء اصطناعي يمكنه إنشاء نماذج ثلاثية الأبعاد من أوصاف النص. تقوم Magic3D ببناء نموذج شبكي ثلاثي الأبعاد بنسيج ملون في حوالي 40 دقيقة بعد تلقي رسالة مطالبة مثل “ضفدع أزرق السهام يجلس على زنبق مائي.” يمكن تغيير النموذج الذي تم إنشاؤه واستخدامه في ألعاب الفيديو أو الأعمال الفنية CGI. تقوم Nvidia بتأطير Magic3D كرد على DreamFusion ، وهو نموذج تحويل النص إلى ثلاثي الأبعاد الذي كشف عنه باحثو Google في سبتمبر ، في مقالهم الأكاديمي. يستخدم Magic3D تقنية من مرحلتين لأخذ نموذج خشن تم إنشاؤه بدقة منخفضة وتحسينه إلى دقة أعلى ، إلى حد كبير كيف يستخدم DreamFusion نموذج تحويل النص إلى صورة لإنشاء صورة ثنائية الأبعاد يتم تحسينها لاحقًا في حقل الإشعاع العصبي NeRF الحجمي ) بيانات. يدعي مؤلفو البحث أن طريقة Magic3D الناتجة يمكنها إنشاء كائنات ثلاثية الأبعاد أسرع مرتين من DreamFusion.

يمكن أيضًا تحرير الشبكات ثلاثية الأبعاد باستخدام المطالبات في Magic3D. يمكن استخدام موجه أساسي ونموذج ثلاثي الأبعاد منخفض الدقة لتعديل النموذج عن طريق تغيير الصياغة. يوضح منشئو Magic3D أيضًا كيفية تحويل نموذج ثلاثي الأبعاد إلى صورة ثنائية الأبعاد لها مظهر صورة ثنائية الأبعاد ، مثل اللوحة التكعيبية ، وكيفية الحفاظ على نفس الموضوع عبر أجيال متعددة (ممارسة تُعرف باسم التماسك). لم تتضمن دراسة Nvidia العلمية أي كود Magic3D.

تبدو نماذج الانتشار الحالية ، التي تستخدم الشبكات العصبية لإنشاء مادة جديدة بعد تدريب مكثف على مجموعة من البيانات ، وكأنها خطوة طبيعية لتكون قادرًا على إنشاء ثلاثي الأبعاد من النص. تم تطوير نماذج تحويل النص إلى صورة مثل DALL-E و Stable Diffusion بالإضافة إلى مولدات تحويل النص إلى الفيديو الأساسية من Google و Meta في عام 2022. كما تم تقديم نموذج تحويل النص إلى صورة ثلاثي الأبعاد المذكور أعلاه DreamFusion بواسطة Google منذ شهرين ، ومنذ ذلك الحين ، طور الأشخاص طرقًا قابلة للمقارنة لاستخدامها كنموذج مفتوح المصدر يعتمد على الانتشار المستقر.

يعتقد الباحثون الذين طوروا Magic3D أن التكنولوجيا ستجعل من الممكن للجميع إنشاء نماذج ثلاثية الأبعاد دون الحاجة إلى تدريب متخصص. بمجرد تطويرها ، ستسرع التكنولوجيا الناتجة في إنشاء ألعاب الفيديو (والواقع الافتراضي) وربما تجد استخدامها في المؤثرات الخاصة للأفلام والبرامج التلفزيونية. “نعتقد أنه باستخدام Magic3D ، يمكننا إضفاء الطابع الديمقراطي على التوليف ثلاثي الأبعاد وفتح إبداع الجميع في إنتاج محتوى ثلاثي الأبعاد” ، اختتم المؤلفون قرب نهاية مقالتهم.

يمكن لنموذج AI الخاص بـ NVIDIA بعد إنشاء نماذج ثلاثية الأبعاد من أوصاف النص التي ظهرت أولاً في Analytics Insight.

اظهر المزيد
زر الذهاب إلى الأعلى