5.4. 测试套件详情#
CTS（Compatibility Test Suite）— 兼容性测试套件#
测试域 |
覆盖内容 |
通过标准 |
|---|---|---|
编译器兼容性 |
FlagTree 编译 + FLIR IR 映射正确性 |
100% |
算子兼容性 |
FlagGems 核心算子功能正确性 |
≥95% |
通信兼容性 |
FlagCX 集合通信功能正确性 |
100% |
框架兼容性 |
FlagScale 训练/推理基本流程 |
100% |
PyTorch API 兼容性 |
常用 aten API 返回值正确性 |
≥90% |
Triton API 兼容性 |
Triton 语言特性支持度 |
≥95% |
精度一致性 |
与 NVIDIA 基线对比，关键指标 |
偏差 <2% |
VTS（Verification Test Suite）— 验证测试套件#
测试域 |
覆盖内容 |
通过标准 |
|---|---|---|
压力测试 |
连续 72 小时算子执行 |
无崩溃 |
稳定性测试 |
重复 1000 次训练/推理流程 |
结果一致 |
长稳测试 |
7×24 持续运行 |
无内存泄漏 |
资源监控 |
GPU 利用率、内存带宽、温度 |
在厂商规格范围内 |
STS（Security Test Suite）— 安全测试套件#
测试域 |
覆盖内容 |
通过标准 |
|---|---|---|
SBOM 扫描 |
依赖组件漏洞扫描 |
无高危/CVE |
驱动安全 |
驱动文件权限、签名验证 |
通过 |
容器安全 |
镜像扫描 |
无高危 |
通信加密 |
FlagCX 通信链路加密验证 |
通过 |
ITS（Interoperability Test Suite）— 互操作性测试套件#
测试域 |
覆盖内容 |
通过标准 |
|---|---|---|
异构混合训练 |
该芯片 + NVIDIA 混合训练 |
效率 ≥81% |
异构混合推理 |
该芯片 + NVIDIA 混合推理 |
精度偏差 <2% |
跨厂商通信 |
FlagCX 跨厂商测试 |
正确性 100% |
多框架兼容 |
FlagScale + vLLM + SGLang |
全部通过 |