具身智能🔥8.0

面向错误恢复的重规划:通过动作分组Turn-GSPO可验证交互训练具身VLM

原标题: 面向错误恢复的重规划:通过动作分组Turn-GSPO可验证交互训练具身VLM

arXiv cs.RO 论文·2026/10/21 04:00:00🔗 原文

📋总体概括

研究团队针对具身VLM在操作执行出错后难以自主恢复的问题,提出可验证交互学习方案:构建提供任务进度与执行错误反馈的ERR-Env环境及涵盖正常、中间、错误三种状态的ERR-Bench基准,并设计在线强化学习方法Action-Grouped Turn-GSPO(AGT-GSPO),以轮次级奖励结合动作分组训练模型的重规划恢复能力,从依赖固定策略或失败样本的旧范式转向可验证的动作结果学习。

⚡关键信息

  • ▸提出ERR-Env环境,为具身VLM提供任务进度与执行错误反馈,支持可验证交互式恢复学习
  • ▸构建ERR-Bench基准,包含正常、中间、错误三类保留任务,用于评估恢复能力与执行可靠性
  • ▸指出旧方法局限:依赖推理期固定策略或从失败样本与参考修正学习,而非经验证的动作结果
  • ▸提出AGT-GSPO在线强化学习方法,结合轮次级任务进度奖励与动作分组机制训练重规划能力

🔥犀利点评

错误恢复才是具身智能从演示走向部署的真分水岭——演示视频里没有打翻的杯子。这篇工作把「可验证奖励」引入重规划训练,方向正确,抓住了失败样本监督的伪闭环问题。但ERR-Bench是自建基准,恢复能力究竟泛化到真实物理世界的混乱程度,还得看仿真外的成绩单。

本文由本站自动聚合,以下为原始来源:前往 arXiv cs.RO 论文 阅读全文 →