BenchPreS基准：记忆型LLM偏好情境选择性差

Sangyeon Yoon 等在 arXiv 发布 BenchPreS 基准，评估持久记忆中的用户偏好是否会在不同第三方沟通情境中被恰当应用或抑制。基准采用误应用率（MR）和恰当应用率（AAR）两项指标。基于论文摘要，研究发现前沿大语言模型难以进行情境敏感的偏好选择；偏好遵循更强的模型过度应用率更高，推理能力和基于提示词的防御均未完全解决该问题。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。