Crowd4D:场景感知的单目4D人群重建
从单目视频中恢复大规模场景中一致的4D人群运动具有挑战性,主要因深度模糊和复杂场景几何。现有方法通常基于单平面假设,导致度量尺度不可靠且复杂地形下空间漂移。Crowd4D是首个场景感知的4D人群重建框架,能联合优化人群与场景,实现场景几何的显式融合,并通过多阶段优化策略保证图像与场景空间一致性。引入了人群-场景交互代理(HSIP),利用场景交互点云(SIPC)与交互曲面(SIS)作为中间表示,融合显式场景几何先验,重新定义优化空间。为增强遮挡下的时间稳定性,设计人群结构连贯正则化(CSCR),利用HSIP空间先验对局部邻域的相对位移和方向施加软时间一致性约束。大量实验表明Crowd4D在复杂大规模场景中显著优于现有方法,实现稳健的单目4D人群重建。
这条 研究论文 信号说明,来自 arXiv cs.CV 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。
