Qwen2.5-Coder é a mais recente série de modelos de linguagem grandes Qwen, projetada especificamente para geração de código, raciocínio de código e correção de código. Com base no poderoso Qwen2.5, através do aumento dos tokens de treinamento para 5,5 trilhões, incluindo código-fonte, base de código de texto e dados sintéticos, o Qwen2.5-Coder-32B tornou-se o modelo de linguagem grande de código aberto mais avançado atualmente, com capacidade de codificação compatível com o GPT-4o. Este modelo é uma versão de ajuste de instruções de 1,5B de parâmetros, no formato GGUF, com características de modelo de linguagem causal, fases de pré-treinamento e pós-treinamento, e arquitetura transformers.