DreamMesh4D es un nuevo marco que combina la representación de mallas con técnicas de deformación controlada dispersa para generar objetos 4D de alta calidad a partir de video monocular. Esta tecnología aborda los desafíos de la consistencia espacio-temporal y la calidad de la textura superficial de los métodos tradicionales mediante la combinación de campos de radiación neurales implícitos (NeRF) o renderizado explícito de Gaussianas como representación subyacente. Inspirado en los flujos de trabajo modernos de animación 3D, DreamMesh4D une el renderizado de Gaussianas a la superficie de la malla triangular, permitiendo la optimización diferenciable de la textura y los vértices de la malla. El marco comienza con una malla aproximada proporcionada por un método de generación 3D a partir de una sola imagen, construyendo un mapa de deformación mediante el muestreo uniforme de puntos dispersos para mejorar la eficiencia computacional y proporcionar restricciones adicionales. Mediante un aprendizaje en dos etapas, que combina la pérdida de fotometría de vistas de referencia, la pérdida de destilación de puntuaciones y otras pérdidas de regularización, se logra el aprendizaje de las Gaussianas de superficie estática y los vértices de la malla, así como de la red de deformación dinámica. DreamMesh4D supera a los métodos anteriores de generación de video a 4D en cuanto a calidad de renderizado y consistencia espacio-temporal, y su representación basada en mallas es compatible con los flujos de trabajo geométricos modernos, mostrando su potencial en la industria de los videojuegos y el cine.