この度、IBMはオープンソース言語モデルGraniteのバージョン3.1を発表しました。今回のアップデートでは、多くの重要な改良が加えられています。新バージョンのモデルは再設計され、より高密度なアーキテクチャを採用することで、最大128,000個のトークンを一度に処理できるようになりました。このアップデートにより、Graniteは複雑なテキストやタスクの処理能力が大幅に向上しました。
Granite 3.1バージョンのモデルは、12種類の言語と116種類のプログラミング言語のデータセットでトレーニングされ、合計12兆個のトークンを処理しました。これにより、モデルの言語理解と生成能力が向上し、ユーザーのニーズにより的確に対応できるようになりました。IBMによると、これらの新しいモデルは、外部データを使用した質問への回答（RAG）、非構造化テキストからの情報抽出、ドキュメントのサマリー作成などのタスクで特に優れた性能を発揮します。
開発者は現在、Hugging Faceプラットフォームからこれらのモデルにアクセスし、様々なアプリケーションシナリオで強力なサポートを得ることができます。Graniteは2024年5月に初めて公開されましたが、今回のアップデートは、IBMによるオープンソースAI分野における継続的な進歩と革新を示しています。
IBMのGraniteモデルは、単なる技術の向上だけでなく、開発者や企業に柔軟性とパワーに優れたツールを提供し、データの処理と分析をより効率的に行えるようにします。人工知能技術の進化に伴い、Graniteモデルは今後も重要な役割を果たし、様々な業界のデジタルトランスフォーメーションを支援します。
IBMは、これらの改良を通じて、より多くの開発者をオープンソースコミュニティに引き込み、人工知能技術の発展を共に推進することを期待しています。Granite 3.1のリリースは、技術的な飛躍であると同時に、将来の言語モデル研究への積極的な推進力となります。
プロジェクトへのアクセス：https://huggingface.co/collections/ibm-granite/granite-31-language-models-6751dbbf2f3389bec5c6f02d
要点：
🌟 新しいGranite 3.1モデルは再設計され、最大128,000個のトークンを処理できます。
🌍 モデルのトレーニングデータは、12種類の言語と116種類のプログラミング言語を網羅し、合計12兆個のトークンを処理しました。
💻 開発者はHugging Faceプラットフォームを通じて、これらの強力なオープンソース言語モデルにアクセスできます。
