Doubao-1.5-pro est un grand modèle linguistique MoE (Mixture of Experts) sparcifié, haute performance, développé par l'équipe Doubao. Grâce à une conception intégrée entraînement-inférence, il atteint un équilibre optimal entre performances du modèle et performances d'inférence. Il excelle sur plusieurs benchmarks publics, notamment en termes d'efficacité d'inférence et de capacités multimodales. Ce modèle convient aux scénarios nécessitant une inférence efficace et une interaction multimodale, tels que le traitement du langage naturel, la reconnaissance d'images et l'interaction vocale. Sa technologie repose sur une architecture MoE à activation parcimonieuse, optimisant le ratio des paramètres d'activation et les algorithmes d'entraînement pour un meilleur rendement que les modèles denses traditionnels. De plus, il supporte l'ajustement dynamique des paramètres pour s'adapter à différents scénarios d'application et besoins en termes de coût.