Presentamos DreamFusion, un producto que utiliza Imagen, un modelo generativo de texto a imagen, para optimizar una escena 3D. Nuestro producto cuenta con Score Distillation Sampling (SDS), una forma de generar muestras a partir de un modelo de difusión mediante la optimización de una función de pérdida. SDS permite la optimización de muestras en un espacio de parámetros arbitrario, como un espacio 3D.
DreamFusion utiliza una parametrización de escena 3D similar a Neural Radiance Fields para definir este mapeo diferenciable. Nuestra plataforma agrega regularizadores adicionales y estrategias de optimización para mejorar la geometría, lo que da como resultado normales coherentes y de alta calidad, geometría superficial y profundidad, y NeRF que se pueden volver a encender con un modelo de sombreado lambertiano.
Los casos de uso de DreamFusion involucran la optimización de escenas 3D para varias aplicaciones, incluidos videojuegos, experiencias de realidad virtual y producción de películas, lo que brinda a los usuarios una herramienta poderosa para mejorar sus proyectos creativos.
Pruebe DreamFusion hoy y experimente la facilidad y conveniencia de optimizar escenas 3D con nuestro avanzado modelo generativo de texto a imagen.
