先日開催されたGoogle I/O Berlinカンファレンスで、Googleは最新の言語モデルGemma2のオープンソース化を発表しました。このモデルは性能と効率において大きな進歩を遂げています。Gemma2は9Bと27Bの2種類のモデルサイズを提供しており、27Bパラメーターのバージョンは、70BパラメーターのLlama3モデルに匹敵する性能を示す一方、モデルサイズはLlama3のおよそ40％に留まっています。

Googleは現在、5月のI/O開発者会議で発表されたAndroid 15の新機能である自動盗難検出機能のテストを実施しています。この機能は、スマートフォン盗難事件が多発し、ユーザーからのフィードバックも多いブラジルで最初にテストされています。

大規模言語モデルは、過度に同調する傾向（「おべっか」）を示すことがありますが、GoogleのQuoc Leチームは、合成データを用いた微調整によってこの問題を解決できることを示しました。この「おべっか」現象は、モデルの規模が大きくなることや、指示による微調整と関連していると考えられています。合成データを追加して微調整することで、モデルの過剰な同調を軽減できるのです。