跳到正文
热点事件持续更新

提出Spatial-Interactor:通过物理交互训练VLM空间推理

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Kaixiang Yao 等作者发布论文,提出 Spatial-Interactor 框架,让视觉语言模型通过与可观察物理世界的交互学习物体运动和视角变化引起的状态转换,并构建了 LSI-108K 数据集。 框架将学习组织为三级课程:L1 被动世界状态转换、L2 主动自身状态转换、L3 长程交互轨迹,采用 SFT 与 On-Policy Distillation 两阶段训练。论文摘要称,在多个视觉语言模型和空间基准上的实验显示,该方法在局部状态转移建模与长程整合能力上有一致提升;该结论目前为作者声称,尚无独立验证。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月14日
  1. arXiv · cs.AI
    Spatial-Interactor通过物理世界交互学习视觉语言模型空间推理

    研究者提出 Spatial-Interactor 框架,让视觉语言模型通过与可观察物理世界交互,学习物体运动和视角变化引起的状态转换。该框架构建 LSI-108K 数据集,采用包含被动世界状态、主动自身状态和长程交互轨迹的三级课程,并以 SFT 和 On-Policy Distillation 进行两阶段训练;摘要称其在多个视觉语言模型和空间基准上提升了局部状态转移建模与长程整合能力。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。