La start-up tokyoïte Sakana AI présente deux nouveaux modèles de génération d'images : Evo-Ukiyoe et Evo-Nishikie.
Image provenant du site officiel de Sakana AI
Ces deux modèles, disponibles sur la plateforme Hugging Face, visent à générer des œuvres d'art de style ukiyo-e à partir de descriptions textuelles ou d'images. Comme vous le savez, l'ukiyo-e est une forme d'art traditionnel japonais populaire du XVIIe au XIXe siècle, représentant divers sujets tels que des scènes historiques, des paysages naturels et des lutteurs de sumo. Sakana AI souhaite, grâce à l'intelligence artificielle, ramener cette forme d'art ancienne sous les feux de la rampe.
Evo-Ukiyoe est principalement un outil de génération d'images à partir de texte. Il est capable de générer des images ressemblant à des ukiyo-e. Par exemple, si vous décrivez des cerisiers en fleurs, des kimonos ou des oiseaux, il générera des œuvres intégrant ces éléments. Il peut même transformer des éléments modernes comme des hamburgers ou des ordinateurs portables en images de style ukiyo-e, bien que les résultats puissent parfois s'éloigner du sujet.
Ce modèle est basé sur le modèle propriétaire Evo-SDXL-JP de Sakana, finement ajusté et entraîné sur un ensemble de données comprenant plus de 24 000 œuvres d'art ukiyo-e. Ces œuvres ont été obtenues en collaboration avec le Centre de recherche sur l'art de l'université Ritsumeikan au Japon, garantissant ainsi la diversité et la haute qualité des données.
Evo-Nishikie, quant à lui, est un outil de traitement d'image à image. Il permet d'ajouter des couleurs à des œuvres ukiyo-e monochromes ou de re-styliser des œuvres déjà en couleur. L'utilisateur n'a qu'à fournir l'image source et les exigences de couleur, le modèle se chargeant du reste.
Sakana AI affirme que son objectif est de promouvoir la compréhension de la « beauté japonaise » traditionnelle grâce à ces deux modèles, et espère trouver de nouvelles applications dans l'éducation et la diffusion culturelle. Bien que les deux modèles ne prennent actuellement en charge que les invites en japonais, ils sont en constante évolution et offriront davantage de possibilités à l'avenir.
Sakana AI a mis à disposition sur Hugging Face ces deux modèles ainsi que le code source, à des fins de recherche et de développement. Il est cependant important de noter qu'ils sont encore au stade expérimental et ne conviennent pas à un usage commercial.
Accès au produit : https://huggingface.co/SakanaAI/Evo-Ukiyoe-v1
Blog officiel : https://sakana.ai/evo-ukiyoe/
Points clés :
🌸 Sakana AI lance les modèles Evo-Ukiyoe et Evo-Nishikie, spécialisés dans la génération d'images de style ukiyo-e.
🎨 Evo-Ukiyoe permet de générer des images à partir de texte, tandis qu'Evo-Nishikie colore les œuvres monochromes.
📚 Ces modèles ne prennent actuellement en charge que les invites en japonais et visent à promouvoir la diffusion et l'enseignement de la culture traditionnelle japonaise.