LEGO:分层语言高斯散射
我们提出了LEGO,用于先进的开放词汇场景理解。其核心创新在于捕捉场景内在的语义层级,如“花盆->花束->花蕾->花瓣”链条。基础模型如SAM能识别二维中的多粒度结构,但其分割受视角限制且缺乏跨视角一致性。LEGO自适应重分级多视角SAM粒度,形成统一且三维一致的层级,为结构连贯的多级三维场景分割提供精确监督。结合CLIP嵌入,LEGO恢复层级语义逻辑,并通过空间关系提升为按层级构建的语言场景图,使大语言模型能进行复杂上下文空间推理和精确视觉定位。实验结果表明,LEGO在可提示和开放词汇三维分割基准上均达新状态,展现先进的层次场景分解与上下文空间推理能力。
这条 研究论文 信号说明,来自 arXiv cs.CV 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。