L'outil de référence Geekbench a lancé un nouvel outil multiplateforme conçu pour évaluer les performances des appareils lors de charges de travail intensives en IA. Baptisé Geekbench AI, cet outil teste les performances du CPU, du GPU et du NPU (processeur de réseau neuronal) d'un appareil afin de déterminer sa capacité à gérer les applications d'apprentissage automatique.
Primate Labs, le développeur de Geekbench, développait auparavant ce logiciel sous le nom de Geekbench ML et avait lancé une version préliminaire en 2021. Aujourd'hui, renommé Geekbench AI, ce changement semble suivre la tendance actuelle de la technologie de l'IA. Pour explorer pleinement les performances de différents matériels dans diverses tâches liées à l'IA, Geekbench AI évalue les performances selon deux dimensions : la vitesse et la précision, et prend en charge plusieurs frameworks, notamment ONNX, CoreML, TensorFlow Lite et OpenVINO.
Les résultats des tests Geekbench AI comprennent trois scores : précision entière, précision demi-précision et précision quantifiée. Primate Labs indique que ces scores incluent également une mesure de précision, utilisée pour évaluer la proximité de la sortie de la charge de travail par rapport aux résultats réels, soit « la précision avec laquelle le modèle exécute la tâche prévue ».
Geekbench AI est actuellement disponible sur Windows, macOS, Linux, Android et iOS. Les utilisateurs peuvent le télécharger et l'essayer. Cependant, pour comprendre pleinement la corrélation entre ces scores de test et les performances des tâches réelles, nous avons besoin de plus de temps pour tester les appareils dotés de fonctionnalités IA locales, tels que Copilot Plus PC et divers nouveaux smartphones.
Contrairement aux tests traditionnels de fréquence d'images ou de temps de chargement, l'arrivée de Geekbench AI signifie que nous devrons peut-être commencer à nous concentrer sur de nouveaux indicateurs, tels que la précision de la prédiction de texte ou les performances des éditeurs d'images IA génératifs. Cela reflète la manière dont la technologie de l'IA est en train de transformer profondément notre façon d'évaluer les performances des appareils.
Le lancement de Geekbench AI offre sans aucun doute une nouvelle norme pour l'évaluation des capacités IA des appareils. Avec l'intégration croissante des fonctionnalités IA dans les appareils, l'importance de ce type d'outils de test ne fera qu'augmenter. Il permettra non seulement aux consommateurs de mieux comprendre et comparer les performances IA des différents appareils, mais il fournira également aux fabricants de matériel des indicateurs de référence pour optimiser les performances IA.
Cependant, nous devons également reconnaître que les tests de performances de l'IA en sont encore à leurs débuts. La corrélation entre les résultats des tests Geekbench AI et l'expérience utilisateur réelle, ainsi que la manière dont ils reflètent avec précision les performances des appareils dans différents scénarios d'application de l'IA, nécessitent des observations et des vérifications supplémentaires.
À l'avenir, nous pourrons assister à l'apparition d'autres outils de test de performances de l'IA similaires, qui évalueront les capacités IA des appareils sous différents angles. Cette tendance reflète également le fait que la technologie de l'IA est en train de devenir une dimension importante de l'évaluation des performances des appareils, aussi importante que les performances traditionnelles du CPU et du GPU.
