实验定位 可视化诊断正结果
A28 把 A27 的 view-level taxonomy 真正画成 image-space lock map:绿色表示 visible-locked,红/紫表示 silhouette/depth conflict,蓝色表示 repair 在输入外新增的 unobserved-closable 区域。它还不是新 mesh 生成算法,但已经形成可投影到 surface/token/SLat 的局部约束表示。
关键观察:gso_002 的 mean visible_locked=0.5775,明显高于 gso_008 的 0.2577;gso_008 同时有更多 depth-conflict views,解释了为什么它必须拒绝。
实验设计(Image-2 风格)
模块设计(Image-2 风格)
Legend
- visible_locked:green: target-visible baseline support preserved by repair
- silhouette_conflict:red: target-visible baseline support deleted by repair
- depth_conflict:purple: conflict pixels in views tagged depth_bad or visible_conflict
- unobserved_closable:blue: repair foreground outside input target, potentially closable if depth-safe
- silhouette_only:yellow: repair adds target-supported foreground not present in baseline
Role in Final Method
这个 lock map 是从后验路由走向生成期约束的中间表示:visible-locked 区域应保留 baseline/VGGT-consistent surface,unobserved-closable 区域允许水密闭合和减面,conflict 区域需要 depth-aware 修正。
实验结果(表格)
| case | visible locked ↑ | silhouette conflict ↓ | depth conflict ↓ | unobserved closable | conflict views | depth conflict views |
|---|---|---|---|---|---|---|
| gso_002_input4 | 0.5775 | 0.0135 | 0.0239 | 0.1076 | [2] | [2] |
| gso_008_input4 | 0.2577 | 0.0065 | 0.0300 | 0.1595 | [2] | [0, 2] |
可视化结果





实验结论
- A28 首次把前面 A20-A27 的抽象门控信号落成真实区域图。这比 scalar gate 更接近最终论文方法,因为它明确指出哪里该锁、哪里可闭合、哪里有冲突。
- gso_002 和 gso_008 的差异可以直观看到:gso_002 保留了较多输入可见支持,且 conflict 集中在局部视角;gso_008 的 visible_locked 比例低,并且存在明显 depth/silhouette conflict。
- 这个实验不声称生成质量提升;它证明的是中间表示可构造、可视化、可解释,下一步可以投影到 3D surface 或 TRELLIS.2 sparse/SLat token。
- 当前限制:lock map 仍基于 silhouette mask 和 A27 view 标签,depth conflict 还不是逐像素连续 depth residual;下一轮应使用 A23/VGGT 缓存生成真正 per-pixel depth residual map。
- 论文主线可以更具体地表述为:Observable-region constrained generative reconstruction for non-orthogonal multiview inputs.
下一步想法
- A29:从 A23 的 VGGT cache 和 candidate rendered depth 中导出 per-pixel depth residual,而不是只用 view-level depth_bad 标签。
- 把 lock map 投影到 mesh surface:统计 visible-locked surface、conflict surface、closable surface 三类面积,并尝试只修复 closable surface。
- 把 lock map 投影到 sparse/SLat token:在采样阶段锁 visible-supported token,允许 unobserved token 参与 watertight closure。
- 扩展到 10-case/100-case:用 lock-map 区域比例预测 false accept/false reject,而不是靠全局 Chamfer 或 mask IoU。