netrans/test/system_test
gwg_xujiao 9c56c77b7c docs: fix broken links and API references 2026-07-20 19:06:01 +08:00
..
P10_summary.json test: 重组目录为 netrans_api/,清理历史遗留脚本,整理系统测试文档 2026-06-22 19:51:28 +08:00
README.md test: 重组目录为 netrans_api/,清理历史遗留脚本,整理系统测试文档 2026-06-22 19:51:28 +08:00
gen_matrix_cases.py refactor: rename preprocessing scale parameter to std 2026-07-20 18:19:32 +08:00
plan.md fix: 多输入模型dataset格式修正 + setup.sh前置环境检查 2026-07-03 13:55:13 +08:00
report.md docs: fix broken links and API references 2026-07-20 19:06:01 +08:00
run_matrix_batch.sh docs: 补全 v6.33.6 系统测试发现的 bug 修复说明 + set_ioq/多输入文档 2026-06-22 14:27:26 +08:00
run_p10_batch.py docs: 补全 v6.33.6 系统测试发现的 bug 修复说明 + set_ioq/多输入文档 2026-06-22 14:27:26 +08:00

README.md

Netrans 系统测试

验证 Netrans 端到端流程与 Acuity 原生命令行产生完全一致的输出。

文档

  • 测试方案 — 覆盖矩阵7 模型 × 6 量化类型 = 42 用例)、测试维度、用例设计
  • 测试报告 — v6.33.6 执行结果:有效通过率 100%35/35、失败分析、P10 多核结果

快速运行

# 生成全部 42 个矩阵测试用例
python test/system_test/gen_matrix_cases.py

# 批量执行(可指定模型/量化类型过滤)
bash test/system_test/run_matrix_batch.sh

# P10 多核全网比对
python test/system_test/run_p10_batch.py

目录结构

test/system_test/
├── README.md                 # 本文件
├── plan.md                   # 测试方案
├── report.md                 # 测试报告
├── gen_matrix_cases.py       # 用例生成器
├── run_matrix_batch.sh       # 批量执行器
├── run_p10_batch.py          # P10 比对脚本
├── {model}_{qtype}_pnna2_2core/   # 测试用例目录(生成产物)
└── P10_*/                    # P10 多核用例(生成产物)

环境要求

echo $ACUITY_PATH     # acuitylib 路径
echo $VIV_SDK_PATH    # pnna2 多核场景需要