StereoSplat+:结合扩散辅助渐进推理的前馈立体高斯散点法
三维高斯散点法(3DGS)的最新进展实现了高质量的场景表示,用于新视角合成。但现有方法多依赖多视角观测或未来帧信息,这在机器人和增强现实等仅有单一立体相机的场景中难以实现。本文提出了StereoSplat+,一种扩散增强的前馈框架,可从单对立体图像因果重建高质量3DGS场景。方法包括输入不变的StereoSplat网络,通过成本体积分支和三平面三维体积分支融合几何信息,并利用连续位姿编码适配不同视角和相机配置;以及一种称为StereoSplat+的单次扩散渐进推理策略,通过从单一立体对预测3DGS,渲染新视图,使用一步扩散增强器细化,再反馈更新3DGS。KITTI-360数据集实验表明,本方法在遮挡区域和视角外推时,显著提升了新视角渲染质量和几何准确性,优于现有前馈3DGS方法。
这条 研究论文 信号说明,来自 arXiv cs.CV 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。