7. 关键检验指标#
性能相关指标需作为关键检验项贯穿阶段 3-6: 阶段 3 关注算子性能,阶段 4a 关注通信吞吐与线性度,阶段 4b 关注训练/推理精度与端到端表现;进入高级合作、Day 0、发行版或展厅展示计划前,应额外确认同等算力下相对 NVIDIA 基线的效率指标(X%,待 KT2期 口径确定)。
阶段 |
核心检验指标 |
通过标准 |
涉及硬件 |
|---|---|---|---|
阶段 0 |
MOU 签署 |
双方盖章生效 |
— |
阶段 1 |
环境就绪 |
芯片被 OS + PyTorch 识别 |
开发板 1 台 |
阶段 2 |
Triton kernel 编译通过率 |
≥95%,CI 机器可用性 ≥99% |
CI 1 台 |
阶段 3 |
FlagGems 算子测试通过率 |
≥80%,核心算子 100% |
CI 1 台 + 调试机 1 台 |
阶段 4a |
集合通信同构吞吐比 |
≥原生库 99% |
2 台多卡集群 |
阶段 4b |
模型精度偏差 |
<2%(相对 NVIDIA 基线) |
复用 4a 设备 |
阶段 5 |
CTS 核心测试项通过 |
100% 或豁免获批 |
CI 1 台 + SVT 2 台 |
阶段 6 |
FlagRelease 上线模型数 |
≥10 个 |
FR 专机 1 台 |
高级合作 |
同等算力性能对标 |
运行效率达到 NVIDIA 同等算力基线 X% |
多卡集群 / FR 专机 / CI |