A Stability AI lançou um novo modelo de IA chamado Stable Zero123, capaz de gerar visualizações de objetos 3D de alta qualidade a partir de uma única imagem. O Stable Zero123 apresenta uma melhoria significativa em relação ao seu antecessor, Zero123-XL, graças a três inovações principais.
O Stable Zero123 utiliza um conjunto de dados de treinamento rigorosamente selecionado do Objaverse, contendo apenas objetos 3D de alta qualidade. Essa melhoria garante que os objetos 3D gerados sejam mais realistas.
Durante o treinamento e a inferência do modelo, o Stable Zero123 utiliza o ângulo da câmera estimado para "condicionamento de elevação" (elevation conditioning). Essa técnica permite que o modelo faça previsões mais precisas, melhorando significativamente a qualidade das imagens geradas. O Stable Zero123 também introduz um conjunto de dados pré-computado e um carregador de dados aprimorado, aumentando a eficiência do treinamento em 40 vezes.
O Stable Zero123 já está disponível no Hugging Face para download e experimentação por pesquisadores e usuários não comerciais. É importante observar que o uso do modelo está sujeito a certas restrições de licenciamento, existindo duas versões: Stable Zero123 e Stable Zero123C. A primeira inclui alguns objetos 3D com licença CC-BY-NC, sendo destinada apenas para fins de pesquisa; a segunda utiliza apenas objetos com licença CC-BY e CC0, permitindo o uso comercial para usuários com assinatura da Stability AI.
Além disso, o Stable Zero123 integra-se com o código aberto threestudio, apoiando a pesquisa em código aberto na geração de objetos 3D. Atualmente, um processo Stable3D simplificado está em fase de pré-visualização privada. Por meio desse método, os usuários podem utilizar o Score Distillation Sampling (SDS) para otimizar o Neural Radiance Field (NeRF) e construir modelos 3D com texturas ricas a partir das imagens geradas pelo modelo Stable Zero123.
O lançamento do Stable Zero123 não apenas traz um avanço tecnológico significativo para o campo da geração de objetos 3D, mas também oferece novas possibilidades para pesquisa e aplicações comerciais.
Blog oficial: https://stability.ai/news/stable-zero123-3d-generation
Destaques:
🌟 O Stable Zero123 gera visualizações de objetos 3D de alta qualidade a partir de uma única imagem, melhorando significativamente os resultados.
📈 O modelo, através de um conjunto de dados aprimorado e da técnica de condicionamento de elevação, permite uma geração de imagens mais precisa.
🆕 O Stable Zero123 está disponível em versões para pesquisa e comercial, sendo que esta última requer assinatura da Stability AI.