Récemment, une équipe de chercheurs de l'Université de l'Illinois à Urbana-Champaign, de Sony AI et de Sony a présenté une nouvelle technologie nommée MMAudio. Cette technologie vise à réaliser une synthèse vidéo-audio de haute qualité grâce à un entraînement conjoint multimodal. L'innovation principale de MMAudio réside dans sa capacité à générer un son synchronisé à partir d'entrées vidéo et textuelles, élargissant ainsi les applications de la génération audio. Elle permet de générer des effets sonores adaptés au contenu vidéo à partir de vidéos ou de texte. La conception de MMAudio lui permet de...