具身智能🔥7.0

DiscoDemo:为模仿学习发现高效多样的机器人演示数据

原标题: DiscoDemo:为模仿学习发现高效多样的机器人演示数据

arXiv cs.RO 论文·2026/10/26 04:00:00🔗 原文

📋总体概括

研究团队提出DiscoDemo框架,将强化学习重新定位为数据生成器而非可直接部署的控制器。该方法通过特权潜在条件化RL生成器,结合并行逆向课程与成功门控多样性目标,在保证任务成功率的同时自动发现多种成功解决方案模式,经安全过滤后导出为静态数据集,供下游视觉运动模仿学习(行为克隆)使用,旨在降低机器人操作演示数据的采集成本并扩大训练数据覆盖面。

⚡关键信息

  • ▸DiscoDemo将RL定位为模仿学习的数据生成器,而非部署控制器
  • ▸核心假设:多种成功解法比反复采集单一解法覆盖更广的成功轨迹空间
  • ▸技术组合:特权潜在条件化RL生成器+并行逆向课程+成功门控多样性目标
  • ▸生成的多套闭环成功行为经安全过滤后导出为静态数据集用于行为克隆
  • ▸直指行为克隆痛点:训练数据覆盖度敏感、多样化成功演示采集成本高

🔥犀利点评

这个思路值得点赞——别再纠结RL策略能不能直接上真机了,把它降级为「造数据的机器」,反而扬长避短:RL探索能力强但部署脆弱,BC部署稳但饿数据。用成功门控保住成功率、用多样性目标撑开轨迹覆盖,等于用仿真把BC最贵的「演示采集」环节白嫖了。但安全过滤和sim-to-real的鸿沟仍在,静态数据集能否覆盖真机扰动是真正的试金石。

本文由本站自动聚合,以下为原始来源:前往 arXiv cs.RO 论文 阅读全文 →