LMSysのチャットボットランキングで、Grok-2とGrok-Miniの2つのAIモデルが素晴らしい成績を収めました。Grok-2は2位を獲得し、GPT-4oを上回り、Geminiと肩を並べました。これは6000人以上のユーザー投票によるものです。Grok-2は数学問題でトップの座を獲得し、他の多くのタスクでも2位に入りました。Grok-2-Miniも5位にランクインし、その実力を示しました。さらに、処理速度が2倍に向上しており、これは推論の進歩によるものです。

Googleは最新のAI作品Gemini 1.5 Proを発表し、Google AI StudioとGemini APIを通じて実験版0801を提供しています。このモデルはLMSYSランキングで1300のELOスコアを獲得し、OpenAIのGPT-4oやAnthropicのClaude-3.5 Sonnetを上回っています。Gemini 1.5 Proは、多言語タスク、数学、コーディング、ビジョンの各タスクで優れた性能を発揮し、200万トークンのコンテキストウィンドウを備えています。

LMSYSチャットボットアリーナのランキング最新データによると、Gemini-1.5-Proは日本語、中国語、フランス語で1位を獲得し、強力な多言語能力を示しました。一方、GPT-4oは英語、ドイツ語、スペイン語で優れた性能を発揮し、首位を維持しています。また、Claude-3Opusはロシア語分野で優れた成績を収め、注目を集めています。

Google BardのGemProバージョンがLMSYSチャットボットランキングでGPT-4を上回り、チャットボット業界に大きな変革をもたらしました。Bardは現在、LMSYSランキングで2位にランクインしており、首位を維持するGPT-4 Turboに徐々に追いついてきています。Bardの躍進は、Google Gemini Pro大規模マルチモーダルモデルを搭載したことが要因であり、1200点を超えるスコアを獲得した2番目のモデルとなりました。LMSYS Orgは、ランキングにおけるBardの急上昇を顕著な出来事だと述べています。