去偏见反而适得其反:基于预处理的刻板印象缓解方法的反直觉副作用
基于预处理的刻板印象缓解方法,如在去偏见语料上进行训练,虽能减少目标群体的可测刻板印象,但研究发现它们常引发意外副作用,即对其他人口群体的刻板印象或反刻板印象相较中性基线增加,这种效应跨模型类型、预处理策略和训练数据规模均存在。传统基准测试往往未能察觉这些变化。通过注意力展开分析,副作用与注意力流变化不大,增加了解释难度。作者讨论了评估影响,提供可操作诊断,并呼吁重视副作用、推进透明的缓解实践。
这条 研究论文 信号说明,来自 arXiv cs.CL 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。