将人工智能对齐于动态的人机协作流程
当前的对齐方法通常聚焦于使用静态的人类偏好表示来模拟人类行为,忽视了现实人机交互中偏好的动态和情境依赖性。本文主张从静态模仿转向互动互补的对齐模式,在该模式下,偏好通过交互逐渐形成,对齐不再仅仅是满足偏好。作者通过将现有对齐与人类和模型行为随时间共同演化的轨迹视角对比,形式化了这一差距。基于跨学科研讨会的见解,结合社会科学关于人类协作的研究,指出人机系统放大了这些动态,带来了新的不确定性推理和协调挑战,并提出了融合机器学习与社会决策科学的研究纲领,以推动互动式人机对齐系统的发展。
这条 研究论文 信号说明,来自 arXiv cs.AI 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。