研究发现 3DGS 几何形成主要由亮度主导,色彩可事后重拟合
kwangmoo_yi · x · 2026-10-03
arXiv 论文《What Builds the Scene? Luminance Dominates Geometry Formation in 3D Gaussian Splatting》(Joshaghani & Cutchin) 通过分通道监督实验研究 3D Gaussian Splatting 中亮度与色度对几何形成的贡献。方法是对不同通道监督训练的模型冻结非外观参数(位置、尺度、旋转、不透明度),用同一求解器重估计外观后比较留出集重建质量。关键发现:
- 仅用亮度学到的几何,留出重建平均只比 RGB 训练低 0.085 dB,几乎无损。
- 删除已训练模型的色度后,表达能力足够的求解器可在冻结几何上重新拟合出原质量甚至略好的外观。
- 高阶球谐对亮度的重建贡献远大于色度:PSNR 平均提升 1.44 dB vs 0.19 dB(镜面材质处色相仍随视角变化)。
- 几何形成阶段差距更大:纯色度监督训出的几何比纯亮度差 3.9–5.5 dB,部分由 densification 差异解释。
结论:标准 3DGS 的几何形成被亮度强烈主导但非完全排他,大量色度信息属于可后置的外观层。作者 kwangmooyi 感慨这与早年用灰度图推断几何形状的传统一致。
所属事件:研究发现亮度主导3D高斯泼溅的几何生成(2 条相关)→
「研究」频道最新
- ENCODE 新预印本:神经网络模型可预测 GATA 基序间超加性相互作用 — anshulkundaje · 2026-11-19
- Murat 发布 TLAPS-Bench:用 TLA+ 形式化证明真实系统规格的正确性 — tianyin_xu · 2026-11-19
- 斯坦福学者详解 ChIP-seq 结合深度学习的 motif 解析难题 — anshulkundaje · 2026-11-19
- Mahina 4.0 LoRA 适配器声称可减少幻觉,公开征集压力测试 — External-Fee-8920 · 2026-11-19
- 顶级实验室的最大优势不是钱,而是帮你省下数年试错时间 — madeofAjala · 2026-11-19
- LEV 循环决策模型:2.6B 模型四轮推理准确率 63.2%→76.2% — jiqizhixin · 2026-11-19