MLPerf 训练基准定义我们将 MLPerf 训练基准 5 指定为在特定数据集上训练模型以达到目标质量。例如,一个基准测量在 ImageNet 数据集上的训练,直到图像分类 top-1 准确率达到 75.9%。然而,这个基本定义并没有回答一个关键问题:我们是否指定要训练哪个模型?指定模型可以对软件或硬件替代方案进行同类性能比较,因为它要求所有替代方案处理相同的工作负载。但是,不指定模型则鼓励模型改进和软硬件协同设计。我们将结果分为两个部分:封闭部分需要使用特定模型进行直接比较,开放部分允许使用任何模型来支持模型创新。