Source: docs/experiments/EXP-3D-CAJU3D-JEPAGATE-V1/PROTOCOL.md · Plain text

EXP-3D-CAJU3D-JEPAGATE-V1 预注册协议(CAJU-3D 第二步:JEPA 潜空间创新能否挑出更值得排除的测量)

0. 背景

1. 修正版逆向 JEPA(已训练、冻结)

2. 分数与门控(锁定)

对每个片段 7 个到达视角上的每个有效测量像素计算四种分数: - JEPA:留一预测的归一化潜空间创新,即该像素所在潜格上 (z − ẑ)² 的通道平均除以 P。z 由目标编码器作用于该视角的 RGB-D 得到;ẑ 和 P 由另外 6 个视角预测。 - DEPTH:跨视角测量深度不一致,即 |D_v − D_rep| / D_v,其中 D_rep 是另外 6 个视角的测量点 z-buffer 到该视角后的最近深度;没有命中的像素计 0 分。 - INC:1 − 入射角/深度跳变权重(第一步的定义)。 - RANDOM:按片段种子生成的均匀随机数(空对照)。

门控规则:每种分数都在片段内的全部有效像素上排序,剔除最高的 10%(并列时用种子抖动随机打破),被剔除的像素不参与 TTT 深度项。

TTT:在 V1 的损失中,深度项改为对保留的有效像素求平均;RGB 项不变。不剔除任何像素时,与 V1 完全相同。100 步 Adam,V1 的参数化和学习率。排练阶段额外跑一个 NONE 臂(不剔除),检查它与已封存的 Core B 一致,即差异在 GPU 非确定性的量级以内。

读出与统计:Core B 读出 sqrt(R7 × F7),按场所统计。

信息边界:只用到达帧,不读取任何查询帧的信息。

3. 开发与确认(锁定)

4. 描述性分析

5. 完整性、预算与修订