12月5日、バイトダンスの豆包大規模言語モデルチームは、最新のコード大規模言語モデル評価ベンチマーク「FullStack Bench」を発表しました。これは11種類以上の現実的なシナリオを網羅し、16種類のプログラミング言語をサポート、3374個の問題を含んでいます。このベンチマークは、従来の評価基準と比べて、より広範なプログラミング分野で、大規模言語モデルのコード開発能力をより正確に評価でき、現実世界のプログラミングタスクにおけるモデルの最適化を促進します。HumanEvalやMBPPなど、現在主流のコード評価ベンチマークは、通常、基礎と高度なレベルに集中しています。

DeepSeek（深度求索）は、オープンソースコード大規模言語モデルDeepSeek Coderを発表しました。DeepSeek Coderは、様々なコードを生成できるインテリジェントなコードアシスタントです。DeepSeek CoderはHugging FaceとGitHubでオープンソースとして公開されています。DeepSeek Coderは、国際的な権威あるデータセットのテストで優れた性能を示しました。DeepSeekはAGIの本質を探求することに尽力しており、今後さらに多くの研究成果を発表する予定です。

アリババグループは、CodeFuse-CodeLlama-34Bの4ビット量子化バージョンを発表しました。量子化されたモデルは、単一のA10またはRTX4090でロード可能です。量子化されたモデルは、Humaneval pass@1指標で73.8％の性能を達成しました。CodeFuseはアリババが独自開発したコード生成専用の巨大言語モデルであり、インテリジェントな提案とリアルタイムサポートを提供することで、開発者の開発効率を向上させます。

シリコンハートテクノロジーは、新たなインテリジェントソフトウェア開発システム「aiXcoder Europa」を発表しました。これは、企業におけるコード大規模言語モデル導入における課題解決に焦点を当てています。新バージョンでは、コード欠陥検出と修正、単体テストコードの自動生成、コードコメントの自動生成、コード解説など、多くの機能が追加され、より多くのコーディングシナリオに対応します。aiXcoderはすでに多くの企業にインテリジェントなソフトウェア開発ソリューションを提供しており、プライベート展開とパーソナライズされたトレーニングにおいて成熟した方法論を確立しています。