アマゾンAWSは、AIモデルの評価を改善し、より多くの人がこのプロセスに参加することを促進するために、人間によるベンチマークチームを発表しました。AWSは、Bedrock上のモデル評価を提供し、リポジトリ内のモデルを評価します。モデル評価には、自動評価と人的評価の2つの部分があり、さまざまな指標に基づいてモデルの性能を評価できます。AWSはまた、自動システムでは検出できない指標を検出するために、人的評価チームとユーザーが協力できる体制を整えています。