A renomada ferramenta de benchmark Geekbench lançou recentemente uma nova ferramenta multiplataforma para avaliar o desempenho de dispositivos em cargas de trabalho intensivas. A ferramenta, chamada Geekbench AI, mede a CPU, GPU e NPU (unidade de processamento neural) de um dispositivo para avaliar sua capacidade de lidar com tarefas de aprendizado de máquina.
A Primate Labs, equipe de desenvolvimento do Geekbench, inicialmente desenvolveu este software com o nome de Geekbench ML e lançou uma versão de prévia em 2021. Com o desenvolvimento da tecnologia e a mudança das necessidades, o software foi renomeado para Geekbench AI, com o objetivo de explorar o desempenho de diferentes hardwares em várias tarefas. A ferramenta avalia o desempenho com base na precisão e velocidade, suportando vários frameworks, incluindo ONNX, CoreML, TensorFlow Lite e OpenVINO.
O Geekbench AI fornece três padrões de pontuação: precisão total, meia precisão e quantização. A Primate Labs afirma que essas pontuações também incluem medições de precisão, usadas para avaliar o quão próximos os resultados da carga de trabalho estão da realidade – ou seja, a precisão do dispositivo ao executar a tarefa.
Para entender melhor a relação entre o desempenho do dispositivo em tarefas reais e as pontuações do Geekbench AI, são necessários mais testes. Por exemplo, para dispositivos com recursos de inteligência embutidos, não nos concentraremos apenas na taxa de quadros ou no tempo de carregamento, mas também na precisão da previsão de texto ou na qualidade dos resultados gerados pelo editor de imagens.
Atualmente, a ferramenta já está disponível para download em plataformas Windows, macOS, Linux, Android e iOS. Os usuários podem experimentá-la e testar seus recursos.
