研究：LLM不同提示方法经不同内部机制适应

Aleksandrov 等作者发布论文（基于论文摘要），分析离散提示优化、prompt tuning 和 prefix tuning 如何改变稠密与 MoE 语言模型的内部处理，结论是三者并非同一种机制。 作者称：离散文本提示优化主要改变响应构建阶段，输入级提示影响内容表示，层级前缀则通过注意力保持对模型的直接控制；在 MoE 模型中，不同方法还形成不同的专家路由。研究还发现通用表示指标难以区分有效适配与匹配的安慰剂提示。

AI 根据报道生成 · 3 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。