Na era digital, avatares virtuais personalizados estão ganhando cada vez mais atenção. Recentemente, uma equipe de pesquisa da Universidade de Hong Kong e outras instituições lançou uma estrutura inovadora chamada DreamWaltz-G, capaz de gerar avatares 3D animados e vívidos a partir de descrições de texto, expandindo enormemente as possibilidades de criação de conteúdo digital.
A tecnologia central do DreamWaltz-G inclui a “destilação de pontuação guiada por esqueleto” e a “representação de avatar gaussiano 3D híbrido”. Ao combinar o controle esquelético de um modelo humano 3D com um modelo de difusão 2D, os pesquisadores conseguiram melhorar a consistência da geração de avatares, especialmente em termos de perspectiva e postura humana. Este método reduz efetivamente problemas comuns na geração, como avatares borrados, membros extras ou distorções faciais.
A representação de avatar gaussiano 3D híbrido empregada pela estrutura, combinando campos implícitos neurais e malhas 3D paramétricas, torna possível o renderização em tempo real e a otimização de destilação de pontuação estável. Este design não apenas melhora a qualidade visual dos avatares, mas também aumenta a expressividade da animação.
Por meio de uma série de experimentos, o DreamWaltz-G demonstrou resultados excepcionais na geração e animação de avatares 3D, superando métodos existentes. Seja para recriação de vídeos humanos ou construção de cenários com múltiplos personagens, esta estrutura demonstra amplas perspectivas de aplicação.
Em termos de aplicação prática, o DreamWaltz-G permite controle e edição de forma. Os usuários podem modificar o modelo SMPL-X durante o treinamento ou ajustar a Gaussiana 3D na fase de inferência para edição de forma. Além disso, o método também suporta a combinação fácil de avatares 3D gerados com vídeos 2D por meio de estimativa de postura corporal 3D e tecnologia de reparação de vídeo, permitindo uma recriação natural.
Seja para criar imagens digitais personalizadas ou para animações complexas em ambientes virtuais, o DreamWaltz-G oferece aos usuários uma conveniência sem precedentes, abrindo uma nova era na criação digital.
Destaques:
1. 📌 DreamWaltz-G é uma estrutura inovadora que gera avatares 3D animados e vívidos a partir de descrições de texto.
2. 🎨 A estrutura combina destilação de pontuação guiada por esqueleto e representação gaussiana 3D híbrida, melhorando a consistência da geração de avatares e a expressividade da animação.
3. 🎥 DreamWaltz-G suporta controle de forma, recriação de vídeo e construção de cenários com múltiplos personagens, expandindo as possibilidades de criação de conteúdo digital.
