跳到正文
热点事件持续更新

LIBERO-RIG基准评测VLA模型硬件鲁棒性

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Andrea Yaoyun Cui 等论文作者发布LIBERO-RIG基准,在固定四项LIBERO任务的前提下,对九种近期视觉-语言-动作模型施加机器人硬件与部署设置扰动,测得其汇总成功率从0.932降至中等严重度的0.767和最高严重度的0.509。 基准覆盖11条扰动轴(包括相机安装与光学、相机-机械臂标定、执行增益、控制频率、本体感知噪声、底座位姿、桌面高度、夹爪垫等),每轴5个严重级别,共210个条件,每条件运行500个回合,并以统计检验支撑各项发现。研究还发现,仅针对视觉扰动训练无法缓解摄像头图像不变条件下的故障。 团队发布了包含各回合固定扰动参数清单的基准供使用。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月14日
  1. arXiv · cs.AI
    LIBERO-RIG:面向视觉-语言-动作模型的硬件设置鲁棒性基准

    研究团队发布LIBERO-RIG基准,在固定四项LIBERO任务的情况下,对九种近期视觉-语言-动作模型进行硬件与部署设置扰动评测。基准覆盖11条扰动轴、每轴5个严重级别,共210个条件,每个条件运行500个回合;汇总成功率从0.932降至中等严重度的0.767和最高严重度的0.509。研究还发现,仅针对视觉扰动训练不能缓解摄像头图像不变条件下的故障,并发布了包含各回合固定扰动参数清单的基准。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。