LumiTokens:通过令牌空间光照变换实现3D重光照
现有的3D重光照方法通常依赖显式材料分解、基于扩散的视图空间生成,或两者结合,且每次光照条件变化都需完全重新计算。本文提出LumiTokens框架,将3D重光照视为对潜在场景令牌的直接变换,无需显式3D表示、渲染方程或基于物理的分解。该模型引入场景令牌编辑器,通过自注意力机制联合处理场景令牌和光线令牌,生成可解码为多视角一致性重光照图像的更新令牌。所有光照信号(环境光图、点光源、面积光)均参数化为Plucker光线令牌,实现统一接口和原生3D交互,并支持渐进式重光照,即用户可逐一累积光源,编辑效果在令牌空间复合。实验表明,LumiTokens在重光照质量上匹敌或优于其他方法,且支持渐进且可组合的光照编辑。
这条 研究论文 信号说明,来自 arXiv cs.CV 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。