Na hora de comprar online, você já se sentiu frustrado com a enorme diferença entre fotos de modelo e fotos de clientes? A mesma roupa, que parece incrível em um manequim, fica péssima em você? Não se preocupe! A equipe de aprendizado de máquina da Universidade de Bielefeld, na Alemanha, desenvolveu uma tecnologia de IA chamada TryOffDiff, capaz de "remover" a pessoa da foto, deixando apenas a roupa, e gerar uma imagem de produto padrão!
Essa tecnologia utiliza a poderosa tecnologia de inteligência artificial de "modelos de difusão", capaz de identificar a forma, cor e textura da roupa em uma foto e "restaurar" essas informações em uma imagem de produto de alta definição. As imagens geradas não apenas são nítidas e realistas, mas também removem automaticamente o fundo, como se fossem feitas por um fotógrafo profissional!
Como funciona o TryOffDiff? Simplificando, é como um "alfaiate" habilidoso. Primeiro, ele usa um codificador de imagem chamado SigLIP para extrair informações características da roupa, como cor, textura e padrões, assim como um alfaiate observa cuidadosamente o tecido. Em seguida, essas informações são "alimentadas" ao modelo de geração de imagem Stable Diffusion. O Stable Diffusion funciona como uma "máquina de costura" mágica, capaz de gerar imagens diversas com base nas informações fornecidas. Por fim, o Stable Diffusion gera uma imagem de produto padrão com base nas características da roupa extraídas, "vestindo" a roupa em um manequim virtual, como se um alfaiate criasse uma peça perfeita.
Para testar a eficácia do TryOffDiff, os pesquisadores usaram um conjunto de dados chamado VITON-HD para treinamento e teste. Os resultados mostraram que o TryOffDiff é extremamente eficaz, gerando imagens de roupas detalhadas e realistas, comparáveis às de um fotógrafo profissional! Em comparação com as tecnologias de prova virtual existentes, o TryOffDiff se destaca na preservação dos detalhes das roupas, especialmente em padrões e logotipos.
As perspectivas de aplicação dessa tecnologia são amplas. Ela pode ajudar os consumidores a entender melhor as informações dos produtos e ajudar as plataformas de comércio eletrônico a melhorar a apresentação dos produtos, reduzindo a taxa de devolução. No futuro, para comprar roupas online, você poderá apenas enviar uma foto sua e ver como ficaria com diferentes roupas, sem mais preocupações com a diferença entre fotos de modelo e fotos de clientes!
Experimente online: https://huggingface.co/spaces/rizavelioglu/tryoffdiff
Endereço do projeto: https://rizavelioglu.github.io/tryoffdiff/
