MAGE:理解多组件提示优化中的稳定性与性能权衡
本文介绍了MAGE(一种记忆增强的目标导向提示进化框架),用于分析提示优化中各组件的相互作用。研究发现了提示优化耦合效应(POCE):多个随机优化信号在闭环中交互,既提升性能又放大方差。这一效果无法通过单独分析各组件预测。实验显示,基于失败反思的方法效果显著优于仅依赖分数或抽象评审的方法;MAGE在多个测试集上的表现优于GEPA;增加候选多样性显著提升准确率,同时放大方差;且该效应依赖基础模型的表现和训练数据规模。结果表明提示优化系统行为复杂,评估时应兼顾性能和稳定性。
这条 研究论文 信号说明,来自 arXiv cs.CL 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。