Source: docs/experiments/EXP-MEASUREMENT-PLANNING-ORACLE-V1/PROTOCOL.md · Plain text

EXP-MEASUREMENT-PLANNING-ORACLE-V1 协议(MEASUREMENT_PLANNING_TASK_V1)

目的: 这是 BUDGETED-MEASUREMENT-PLANNING 研究线的第一阶段,即 oracle 余量审计。设定是 RGB 与相机免费、深度测量有预算。要检验的是:"在哪些帧上请求深度"这个决策,是否存在简单启发式没有吃掉的余量。本阶段不训练任何模型。

判定规则见 preregistration.md,机器可读的契约在 task_contract.json、information_contract.json、baseline_contract.json、scene_manifest.json、frame_role_lock.json。

1. 任务

2. 重建后端(冻结、无模型)

3. 指标与聚合

4. 方法

可部署的选择规则(10 个),只通过 MeasurementEnv 行动,打平时取较早的帧:

名称 定义
UNIFORM 候选序上的居中分层:取第 ⌊(i + ½)·n/k⌋ 个
TEMPORAL_EVEN 在候选帧序跨度上等距取 k 个目标位置,各取最近的候选帧
LATEST 最新的 k 个候选帧
RANDOM_SEEDED 每个 episode 和预算用固定种子(20261006、场景、角色、k)抽一次
POSE_FARTHEST 贪心:离已测或已选相机最远;距离 = 平移(m)+ 1 m/rad × 旋转角
MAX_UNCOVERED 按初始上下文重投影到候选视角后的未覆盖比例(8 像素规则)取前 k 个
MAX_NOVELTY3D 按候选视角的预测表面中,离所有已测点超过深度 2% 的比例取前 k 个。预测表面由已测点 z-buffer 的冻结调和补洞得到
GREEDY_COVERAGE 贪心未覆盖比例;每请求一帧,就把它的深度加入已测几何再重新打分
GREEDY_FILL_DISTANCE 贪心:候选像素到最近已测命中点的平均距离(上限 32 像素),作为不确定性的代理
GREEDY_PHOTOMETRIC 贪心光度残差:把已测 RGB-D 重投影到候选视角后与候选 RGB 的平均差,没有命中的像素记为 1

诊断量(只走教师路径,不可部署):

名称 定义
ORACLE 每个 episode 中,大小为 K、使 episode 平均 ALL AbsRel 最小的子集(样本内)
XORACLE 交叉查询 oracle:用 episode 中另一个查询选子集,在这一个查询上打分
RANDOM_EXPECTED 大小为 K 的全部子集的精确平均,即均匀随机策略的期望
WORST 最差子集,只用来看范围
QUERY_NEAREST 离任一查询相机最近的 K 个候选帧(用到查询相机)

最佳启发式: 每个 K 下,在同一数据上取场景平均 ALL AbsRel 最低的可部署规则。这样选出的启发式偏强,所以对余量判定是保守的。

5. 队列

名称 场景 用途
EVAL34 EVAL-V3 ∪ EVAL-V4,83 个 主判定
EVAL34_GAP3 同一批场景,只保留帧序距每个查询都 ≥ 3 的候选帧(每条记录 4–9 个) 次要:排除相邻帧效应
EVAL_FAR EVAL-FAR,79 个 次要:远处查询,与所有候选帧都相距很远
REPLICA 8 个 描述:跨数据集
DEV 8 个 只用于彩排,不进入结果

次要的学习式后端: 已测区域(距任何已测命中点不超过 8 像素)用调和补洞,其余用 G1。G1 的预测来自封存的探针:EVAL34 用 1 个 seed,DEV 用 3 个 seed。只作描述,字段为 g1_*。

6. 第一阶段问题与对应的量

问题 量
Q1 NO_DEPTH 到 best-1 的改善 调和插值 − ORACLE_1
Q2 best-2/best-4 是否收益递减 ORACLE 的逐 K 增量,以及按历史大小分组的边际效用
Q3 最强启发式离 oracle 多远 BEST_H_K − ORACLE_K、BEST_H_K − XORACLE_K、余量比例
Q4 最优帧是否因场景而异 best-1 在池中位置的分布,以及众数位置的占比(低于 0.5 记为因场景而异)
Q5 位姿或覆盖规则是否已接近 oracle 各规则的余量比例
Q6 效用是否有可预测的结构 单步效用与每个可部署特征的 episode 内 Spearman,及其 top-1 一致率
Q7–Q9 覆盖与效用的错位 未覆盖比例高但效用低的候选帧数,以及反过来的情况
Q10–Q11 是否值得训练效用预测器 由判定决定
Q12 与 NBV / active mapping 的边界 见 docs/measurement_planning_related_work.md

可预测性按单个特征的平均 |Spearman| 标记:大于 0.6 为 STRONG,0.3–0.6 为 MODERATE,小于 0.3 为 WEAK。这只是描述,不用于判定。

7. 完整性

8. 不做的事