Récemment, Roblox a annoncé le lancement et l'open-source de Cube3D, son premier modèle d'IA de base pour la génération d'objets 3D. Selon le communiqué de presse de Roblox, Cube3D vise à améliorer l'efficacité de la création 3D, permettant aux développeurs d'explorer rapidement des directions créatives et d'accroître leur productivité.
Site web de Roblox
L'innovation de ce modèle réside dans sa méthode d'entraînement. Roblox explique s'être inspiré des modèles de prédiction de texte pour créer une technique permettant de tokenizer les objets 3D. Cube3D est entraîné à prédire le prochain marqueur de forme, afin de construire un objet 3D complet.
Concernant les données d'entraînement, la porte-parole de Roblox, Samantha Spielman, a déclaré que le modèle utilisait « une combinaison de jeux de données sous licence et accessibles au public, ainsi que des données d'expérience provenant de l'écosystème Roblox ».
Roblox a également dévoilé ses plans de développement futurs pour Cube3D, indiquant que le modèle deviendrait finalement un modèle multi-modal, capable d'accepter plusieurs types d'entrées tels que du texte, des images et des vidéos, et qu'il serait intégré aux outils de création IA existants de Roblox. Il est particulièrement intéressant de noter que les futures versions pourront générer des objets 3D à partir d'images en entrée.