楽天グループは、日本初の大規模言語モデル（LLM）と小型言語モデル（SLM）である「Rakuten AI 2.0」と「Rakuten AI 2.0 mini」を発表しました。これらのモデルの発表は、日本における人工知能（AI）の発展を促進することを目的としています。Rakuten AI 2.0は、混合専門家（MoE）アーキテクチャに基づいており、8x7Bのモデルで、それぞれ70億パラメーターを持つ8つのモデルで構成され、各モデルが専門家として機能します。入力トークンを処理するたびに