EXP-3D-CAJU3D-READOUT-LOCO-V1:学到的读出的留一队列稳健性分析
结论(描述性):FUSE_V2 的配方在四个留出队列上都把 Core B 的误差降低了 17–37%,每个队列都用其余全部队列训练。 - 合计 350 个场所:0.1395 → 0.1033,+0.0362 [+0.0230, +0.0524],278/0/72,判定 SUPPORTED; - 中位场所改善 +0.009。
设计(PROTOCOL.md,2026-10-14 23:31:35 锁定)
- 留出折:CONF_SYSTEM3、CONF_VAL、CAJU、ARKIT_SYSTEM4。FIT_SYSTEM 和 FIT_SYSTEM2 拟合过 KF 表,所以只作训练、不作留出。
- 配方:与 SYSTEM4-HOLDOUT-V1 的 FUSE_V2 完全相同:
- 已覆盖像素用冻结的 KF 表,只学未覆盖修正;
- 3 个种子,30 个 epoch,训练场所中 10% 用于选 epoch。
- 用时:GPU 4 上共 790 秒。
结果(loco_results.json)
| 留出队列 | 训练场所 | Core B | KF_BASE | FUSE_LOCO | Core B − FUSE_LOCO | 场所 好/平/坏 | 判定 |
|---|---|---|---|---|---|---|---|
| SYSTEM3 | 350 | 0.15689 | 0.15381 | 0.11269 | +0.0442 [+0.0226, +0.0748] | 120/0/40 | SUPPORTED |
| VAL | 430 | 0.11608 | 0.11341 | 0.09591 | +0.0202 [+0.0115, +0.0295] | 65/0/15 | SUPPORTED |
| CAJU | 452 | 0.11760 | 0.11488 | 0.09752 | +0.0201 [+0.0088, +0.0340] | 47/0/11 | SUPPORTED |
| SYSTEM4 | 458 | 0.14615 | 0.14265 | 0.09190 | +0.0543 [+0.0187, +0.1159] | 46/0/6 | PARTIAL(头部占比 0.52) |
| 合计 | — | 0.13945 | 0.13647 | 0.10325 | +0.0362 [+0.0230, +0.0524] | 278/0/72 | SUPPORTED |
- 对分箱表:KF_BASE − FUSE_LOCO 合计为 +0.0332,260/0/90,PARTIAL。
- 逐场所改善的分位数(合计):最小 −0.103,25% +0.0007,中位 +0.0091,75% +0.035,最大 +1.54。
- 与预注册结果一致:训练数据更多时,SYSTEM3 从 V1 的 0.1143 降到 0.1127,VAL 从 0.0984 降到 0.0959。
本分析是描述性的,不构成新的确认性结论;确认性的证据见 FUSENET-V1、FUSENET-REPL-V1 和 SYSTEM4-HOLDOUT-V1。