DreamMesh4D ist ein neuartiges Framework, das Gitterdarstellung und spärlich gesteuerte Deformationstechniken kombiniert, um hochwertige 4D-Objekte aus Monovideos zu generieren. Durch die Kombination von impliziten neuronalen Strahlungsfeldern (NeRF) oder explizitem Gaußschen Rendering als zugrunde liegende Darstellung behebt die Technologie die Herausforderungen traditioneller Methoden hinsichtlich der räumlich-zeitlichen Konsistenz und der Qualität der Oberflächentexturen. Inspiriert von modernen 3D-Animationsabläufen bindet DreamMesh4D das Gaußsche Rendering an die Oberfläche eines Dreiecksgitters, wodurch eine differenzierbare Optimierung von Textur und Gitterknoten ermöglicht wird. Das Framework beginnt mit einem groben Gitter, das von einer Methode zur 3D-Generierung aus Einzelbildern bereitgestellt wird, und erstellt durch gleichmäßiges Abtasten spärlicher Punkte eine Deformationskarte, um die Berechnungsleistung zu verbessern und zusätzliche Einschränkungen zu bieten. Durch zweistufiges Lernen, kombiniert mit Referenz-Ansichts-Photometrieverlust, Score-Destillationsverlust und anderen Regularisierungsverlusten, werden statische Oberflächen-Gauß- und Gitterknoten sowie das dynamische Deformationsnetzwerk gelernt. DreamMesh4D übertrifft bestehende Video-zu-4D-Generierungsmethoden in Bezug auf Renderqualität und räumlich-zeitliche Konsistenz. Seine gitterbasierte Darstellung ist mit modernen geometrischen Workflows kompatibel und zeigt sein Potenzial für die 3D-Spiel- und Filmindustrie.