AnySplat:从无约束视图前馈生成3D高斯点云
Jiang, Lihan ; Mao, Yucheng ; Xu, Linning ; Lu, Tao ; Ren, Kerui ; Jin, Yichen ; Xu, Xudong ; Yu, Mulin ; Pang, Jiangmiao ; Zhao, Feng ; Lin, Dahua ; Dai, Bo
发布日期: 6/1/2025

摘要
我们介绍了AnySplat,这是一种用于从未标定图像集合中合成新视角的前馈网络。与传统的神经渲染管道不同,后者需要已知的相机姿态和每场景优化,或者最近的前馈方法在密集视图的计算负担下表现不佳,我们的模型能够在一次操作中预测所有内容。单次前向传递即可生成一组包含场景几何和外观信息的3D高斯基元,以及每个输入图像对应的相机内参和外参。这种统一的设计可以轻松扩展到随意拍摄的多视图数据集,而无需任何姿态注释。在广泛的零样本评估中,AnySplat在稀疏视图和密集视图场景下均达到了姿态感知基线的质量水平,同时超过了现有的无姿态方法。此外,与基于优化的神经场相比,它显著降低了渲染延迟,使得在不受限制的捕获设置中实现实时新视角合成成为可能。项目页面:https://city-super.github.io/anysplat/