DreamFusion هو منتج يستخدم نموذجا توليديا لتحويل النص إلى صورة يسمى Imagen لتحسين مشهد 3D.
يتميز المنتج بأخذ عينات تقطير النقاط (SDS) ، وهي طريقة لتوليد عينات من نموذج الانتشار عن طريق تحسين وظيفة الخسارة. يسمح SDS بتحسين العينات في مساحة معلمة تعسفية ، مثل مساحة 3D.
يستخدم المنتج معلمة مشهد 3D مشابهة لحقول الإشعاع العصبي لتحديد هذا التعيين القابل للتمييز. يضيف DreamFusion المزيد من المنظمين واستراتيجيات التحسين لتحسين الهندسة ، مما ينتج عنه مستويات طبيعية متماسكة وعالية الجودة ، وهندسة السطح والعمق ، و NeRFs القابلة لإعادة الإضاءة مع نموذج تظليل Lambertian.
تتضمن حالات استخدام DreamFusion تحسين مشاهد 3D لمختلف التطبيقات ، مثل ألعاب الفيديو وتجارب الواقع الافتراضي وإنتاج الأفلام.