通过知识图谱定位提升小型语言模型的推理能力
尽管大型语言模型在零样本推理上表现出色,但其部署成本高且对环境影响大。小型语言模型(SLMs)作为可持续替代方案,在复杂多跳逻辑推理任务中易出错。本文提出一种神经符号代理框架,通过两种专用工具调用,利用关系图卷积网络(RGCN)为SLMs(如Gemma 3和Llama 3.2)提供知识图谱支持。实验基于CLUTRR亲属关系基准,在真实和Oracle场景下验证方法有效性。结果显示,RGCN提示相较故事文本基线性能提升1.5至2倍,但知识抽取瓶颈和多跳推理连锁错误限制了效果。此外,某些架构中自生成噪声事实导致“干扰效应”,削弱了专家提示的效果。该研究揭示了低资源神经符号系统中符号定位的挑战,并为迭代验证提供了路径。
这条 研究论文 信号说明,来自 arXiv cs.AI 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。