arXiv · cs.AI· Aayush Mishra, Arnau Padrés Masdemont, Victor Conchello Vendrell, Jordi Ros Giralt, Arash Behboodi, Fabio Valerio Massoli·· 2 天前
让循环语言模型实现动态计算
Enabling Dynamic Computation in Looped LMs
arXiv:2610.09013v1阅读论文 PDF ↗
仅依据论文摘要整理；未读取全文，实验条件、证明与基准细节请核对原文。
作者：Aayush Mishra, Arnau Padrés Masdemont, Victor Conchello Vendrell, Jordi Ros Giralt, Arash Behboodi, Fabio Valerio Massoli
首次提交：2026-10-07 03:09
研究任务与主要进展
研究提出“best-available”KV缓存策略，使循环语言模型能够真正按计算需求动态运行，在保持全深度性能的同时最多减少30%的FLOPs与KV内存。作者还提出面向该缓存策略的训练方式，并调整提前退出目标的施加方式，使不同Token依据任务难度在不同深度退出；结果在Ouro模型及从头预训练的小型循环语言模型上进行了验证。当前依据仅为论文摘要。
阶段、条件与复现 · 深读核对
- 新能力对应什么具体任务与最小输入输出？
- 代码、模型、数据、许可与可用入口是否明确？
- 效果、总成本、失效条件与实际工作流如何验证？
这些是阅读核对问题；材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。
来源：arXiv · cs.AI · arxiv.org