Qwen2.5-Coder-3B est un grand modèle linguistique de la série Qwen2.5-Coder, spécialisé dans la génération, le raisonnement et la correction de code. Basé sur le puissant Qwen2.5, ce modèle a été amélioré grâce à l'augmentation du nombre de jetons d'entraînement à 5,5 billions, incluant du code source, des bases de code textuelles et des données synthétiques. Il a ainsi réalisé des améliorations significatives dans la génération, le raisonnement et la correction de code. Qwen2.5-Coder-32B est devenu l'un des modèles de langage de code open source les plus avancés, ses capacités de codage étant comparables à celles de GPT-4o. De plus, Qwen2.5-Coder-3B fournit une base plus complète pour les applications du monde réel, telles que les agents de code, améliorant non seulement les capacités de codage, mais aussi en conservant ses avantages en mathématiques et en capacités générales.