La controverse autour des tests de référence en intelligence artificielle s'intensifie. Un employé d'OpenAI accuse la société d'IA xAI, fondée par Elon Musk, d'avoir publié des résultats de tests de référence de Grok 3 trompeurs, tandis que le co-fondateur d'xAI, Igor Babuschkin, affirme que l'entreprise n'a rien fait de mal. L'incident est né de la publication par xAI sur son blog d'un graphique montrant les performances de Grok3 lors du test AIME2025. AIME2025 est une série de...

Anthropic a lancé un programme visant à financer le développement de nouveaux types de tests de référence pour évaluer les performances et l'impact des modèles d'IA, y compris les modèles génératifs tels que son propre modèle Claude.

Google a dévoilé Gemini, son nouveau système d'intelligence artificielle, qui a démontré des performances exceptionnelles, surpassant les modèles existants dans plusieurs tests de référence. Développé par Google DeepMind, Gemini prend en charge plusieurs modalités, notamment le texte, les images, l'audio, la vidéo et le code. Trois versions de Gemini sont proposées, optimisées pour différents cas d'utilisation. Par rapport à ses concurrents, Gemini a fait des progrès significatifs en réduisant l'écart de performance. Ses fonctionnalités multimodales offrent un potentiel de monétisation dans des domaines tels que les services cloud.