通用病理学,条件性后果:多跳可追溯性的三重稳健性分析
本文通过保持检索架构不变,分别从嵌入器、语料库和评判者三个正交轴对GraphRAG进行了三重稳健性分析。结果发现,GraphRAG普遍存在过度引用现象,引用精确度较低但召回率较高,其忠实度表现依赖于语料库类型,在类型边缘需求文档中多跳忠实度大幅下降,而在维基百科链中有所提升。此外,不同语料库条件下胜出方法不同,但对嵌入器表现稳定。单评判者的语言模型忠实性评判对检索状态较为脆弱。研究强调三重稳健性分析是可信赖RAG架构声称的最低标准。
这条 研究论文 信号说明,来自 arXiv cs.CL 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。