实验 2:VGGT 静态几何加权

冻结 TRELLIS.2,只改变多视图平均权重

实验定位 无效

这个实验检验最直接的想法:用 VGGT 判断每张输入图的几何可靠性,然后替换 multidiffusion 里默认的 1/V 等权平均。

实验设计(Image-2 风格)

实验设计图:VGGT 分数到多图加权采样
实验设计图:VGGT 分数到多图加权采样
模块设计图:confidence/support/coverage 评分公式
模块设计图:confidence/support/coverage 评分公式

模块设计(Image-2 风格)

本页的模块设计图已在“实验设计”区域并排展示;它描述输入视角、VGGT/TRELLIS.2 信号、门控/路由、mesh 输出和评测反馈之间的数据流。这里单独标出模块设计章节,方便按统一汇报格式阅读。

实验结果(表格)

方法成功Chamfer ↓F@5% ↑相对变化判断
uniform multidiffusion10/100.081610.4336基线基线
VGGT confidence10/100.081460.4372Chamfer Δ=-0.000146; F@5 Δ=0.0035不通过
VGGT geometry10/100.085130.4393Chamfer Δ=0.003525; F@5 Δ=0.0057不通过

VGGT 提取平均耗时 1.10 s/case,峰值 reserved 显存约 8.44 GiB。

可视化结果

VGGT 静态加权 Chamfer 条形图
VGGT 静态加权 Chamfer 条形图

实验结论

下一步想法

把 VGGT 从“全局视角权重”改成“空间局部几何约束”:每个 patch / voxel 的可信度不同,应该只在跨视角一致的空间区域影响 TRELLIS.2。