论文提出多智能体辩论设定评估LLM规范性能力
热点事件持续更新
论文提出多智能体辩论设定评估LLM规范性能力
1 篇报道1 个报道来源5 小时前更新
先了解这件事
AI 综述
Andrea Wynn 等作者在 arXiv 发布论文《Reading the Room: Foundations, Design, and Challenges of Normative Competence in LLMs》(arXiv:2610.10906v2),提出多智能体社区辩论设定——由合成规范控制辩论参与权,以在排除预训练暴露的情况下单独评估 LLM 的规范性能力。基于论文摘要,结果显示基线 LLM 代理即使遵循规范能提高准确性,也未能成功学习规范;加入规范推断模块后,规范遵循又高度依赖规范的表述方式和驱动该模块的模型,作者称这表明缺乏泛化性。 实验还发现,代理会把与规范无关的个体化行为一并复制,即使模仿这些行为受到惩罚,这一现象仍未消失。
AI 根据报道生成 · 1 小时前更新
最新进展10月14日 12:00
LLM规范性能力:多智能体社区辩论中的基础、设计与挑战报道时间线
沿着报道,了解事件的不同侧面。
10月14日
- arXiv · cs.AILLM规范性能力:多智能体社区辩论中的基础、设计与挑战
作者提出多智能体社区辩论设置,研究LLM能否仅从互动中推断并遵循群体规范。基于论文摘要,基线LLM代理即使遵循规范能提高准确性,也未能成功学习规范;加入规范推断模块后,行为又明显依赖规范表述和所用模型。实验还发现,代理会把与规范无关的个体化行为一并复制,即使模仿这些行为受到惩罚,这一现象仍未消失。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。