LLM 评估 上下文偏见 对话历史 记忆效应
摘要

本文研究了先前对话历史的极性是否会导致大语言模型(LLM)在后续评估中产生偏见,即“累积消息效应”(AMEL)。通过对 11 个模型进行近 7.6 万次 API 调用实验,发现模型判断会显著向对话的主流极性偏移,尤其在模型基线不确定时更为明显。该偏差随历史长度增加并不增长,且存在负面信息不对称现象。研究指出,为每个评估项提供全新上下文是最简单的解决方案,若必须批量处理,平衡历史记录有助于减轻偏差。

AI 推荐理由

研究对话历史(记忆)对 LLM 判断的偏见影响,属记忆机制关键部分。

论文信息
作者 Sid-ali Temkit
发布日期 2026-05-21
arXiv ID 2605.22714
相关性评分 8/10 (高度相关)