FlagPerf est un moteur d'évaluation de matériel IA intégré, co-construit par l'Institut de recherche sur l'intelligence artificielle (BAAI) et les fabricants de matériel IA. Il vise à établir un système d'indicateurs orienté vers la pratique industrielle pour évaluer les performances réelles du matériel IA dans différentes combinaisons de piles logicielles (modèle + framework + compilateur). Cette plateforme prend en charge un système d'indicateurs d'évaluation multidimensionnel, couvrant les scénarios d'entraînement et d'inférence de grands modèles, et prend en charge plusieurs frameworks d'entraînement et moteurs d'inférence, reliant le matériel et l'écosystème logiciel de l'IA.