2 Commits
Author SHA1 Message Date
hm 2936b4a888 feat(corpus): W12 首批真实语料导入与 B1/B2/B5/B6 真实 KPI 基线
真实语料 11 个 / 10,697,067 B(STEP 6、DXF 3、DWG 1、3MF 1),来源 ViewDesign-deepseek/corpus(与 kimi、Assembly 仓交叉校验),按 sha256 前 12 位命名;3 个文件做同长度 PII 脱敏(几何零改动),逐资产来源/哈希/许可判定见 corpus/real_manifest.json 与 real_provenance.md。

manifest 工具扩展:gen_manifest.py 扫描 corpus/real 并做登记表双向复核(未登记文件/哈希不符 exit 1),verify_manifest.py --strict 覆盖 tests/data + corpus/real;实测 gen --check 与 verify --strict 均 exit 0(63 合成 + 11 真实)。

driver 增加真实语料识别(real_corpus_present/real_step_files),修复 Get-StepFileCount 扩展名过滤 bug(首跑误记 11 STEP → 6 STEP)。

真实语料实测(run-20261119-225558):B1 import 6/6、clean 0/12=0%、perturbed 0/24=0%(381→372s);B2 3/19(与合成一致,无真实脏模型);B5 单线程 3 轮 bit-identical 通过、2/4/8 线程 digest 不一致且 8 线程拓扑不同(282v/434e),8 线程加速比 0.94x;B6 4/4 bounded_pass(4×30s≈180s)。KPI 表与门限建议见 docs/planning/benchmarks-kcp-wave1.md §7.1 与 docs/planning/wave2/corpus-notes.md。
2026-11-19 23:06:19 +08:00
hm d6cb92a1ef feat(corpus+bench): W4 语料规范/清单与 KCP-1.0 Wave1 基准 harness(B1/B2/B5/B6)
- corpus/:诚实语料清单(63 资产/513004B:61 合成 + 2 真实参照;corpus/real 与
  corpus/realfile 缺失登记为 missing 并双向校验),真实语料目录/获取/校验/licensing
  规范,manifest 生成与校验脚本(gen_manifest.py --check / verify_manifest.py --strict)
- tests/benchmark/bench_kcp.cpp:独立 CLI(不注册 ctest,不改既有测试结果),实现
  B1 STEP 布尔通过率(clean + 合成扰动 jitter/orientation)、B2 healing 恢复曲线
  (合成脏化 + 仓库真实脏夹具)、B5 拓扑/几何 IEEE bit-identical 与 OMP 线程加速比
- tools/bench_kcp/:run_kcp_bench.ps1(B1/B2/B5/B6 聚合 JSON/MD,PS5.1/7 兼容,
  B6 外部限时 bounded_pass 语义)、run_nightly_bench.ps1(语料门禁 + 4×450s≈30min
  fuzz + 历史归档)
- docs/planning/benchmarks-kcp-wave1.md:基准定义、字段契约、KC 覆盖、本地基线;
  docs/planning/benchmarks-nightly-integration.md:与 W1 CI nightly 对接的 YAML 片段
  与职责边界

本地样例(d2d50012,Release,24 逻辑核,报告
build/kcp_bench/run-20261119-214443/kcp_bench_20261119-214443.json):
B1 22/40(import 4/4,clean 9/12,perturbed 9/24);
B2 3/19(control 3/3,合成 gap/flip 0/15,真实脏夹具 0/1);
B5 13/16(threads=1 bit-identical,2/4/8 不一致,8T speedup 0.84x);
B6 4/4 bounded_pass(各 30s 无 FAILED/崩溃)。
真实语料为 0,B1/B2 真实数据 KPI 不成立;B5 暴露 KC-I12 多线程确定性/扩展性缺口,
本轮只报告不改内核。
2026-11-19 21:52:05 +08:00