紧凑开源LLM从残缺轨迹恢复航空出行事件准确率很低

Hsuan-Chih Wang 和 Xianfeng Terry Yang 在 arXiv 论文（基于摘要）中评测了紧凑本地部署大语言模型从不完整出行轨迹恢复航空出行端点信息的能力，结论是该能力有限：精确转移段准确率仅 9.2%，起点、终点机场准确率分别为 31.4% 和 10.7%，仅 1.9% 的请求同时恢复转移段和机场对。 评测构造方法：使用美国 2022 年 1 月全国 LBS 数据，将 30 次高置信航空旅行按移除起点机场、终点机场或两端附近观测，构造三种端点缺失条件；再用两个模型、4 种提示变体共生成 720 次请求，每次采用两阶段流程，其中最明确的提示取得最高的观察恢复率。

AI 根据报道生成 · 2 天前更新