先日東京で開催されたGemma開発者日に、Googleは新しい日本語版Gemma AIモデルを発表しました。このモデルはGPT-3.5に匹敵する性能を示しながら、パラメーター数はわずか20億と非常にコンパクトで、モバイルデバイス上での動作にも最適です。今回の日本語版Gemmaモデルは、日本語処理において優れた性能を発揮する一方、英語での能力も維持しています。これは小型モデルにとって特に重要で、新しい言語への微調整において「壊滅的な忘却」に陥る可能性を低減します。

最近の研究で、OpenAI研究チームは、機械学習エンジニアリングにおけるAIエージェントの性能を評価するための新しいベンチマーク、MLE-benchを発表しました。この研究は、Kaggleの75の機械学習エンジニアリング関連コンペティションに焦点を当てており、モデルのトレーニング、データセットの準備、実験の実行など、現実世界の様々なスキルをテストすることを目的としています。より良い評価のために、研究チームはKaggleの公開ランキングの基本データを使用し、各コンペティションの...