具身智能🔥7.0

GraspTwin:基于数字孪生的零样本面向任务抓取优化

原标题: GraspTwin:基于数字孪生的零样本面向任务抓取优化

arXiv cs.RO 论文·2026/9/28 04:00:00🔗 原文

📋总体概括

arXiv论文GraspTwin提出基于数字孪生的零样本面向任务抓取优化框架。针对家庭场景中「倒咖啡要握杯柄」这类任务级抓取需求,现有方法要么抓得稳但与任务无关,要么靠基础模型给出抓取点却缺乏细粒度物理接地。该工作用real-to-sim-to-real框架,仅凭单次RGB-D观测构建环境数字孪生,在仿真中优化抓取位姿再迁移回真机,实现零样本泛化,弥合了鲁棒抓取与任务语义之间的鸿沟。

⚡关键信息

  • ▸论文GraspTwin提出real-to-sim-to-real框架,用单次RGB-D观测构建环境数字孪生
  • ▸面向任务抓取:如倒咖啡需抓住杯柄而非杯沿,现有学习方法难以兼顾
  • ▸现有方法痛点:鲁棒抓取与任务无关,基础模型抓取点缺乏细粒度物理接地
  • ▸框架强调零样本能力,可从结构化工厂环境泛化到家庭多样物体场景

🔥犀利点评

这类工作瞄准的是真痛点:抓得稳和抓得对是两回事,倒咖啡抓杯沿就是废操作。用数字孪生把基础模型的语义建议做物理接地,路线合理。但单次RGB-D重建的孪生精度能撑起细粒度接触仿真吗?杯柄这种薄壁结构的仿真与现实差距往往一抓就穿帮。零样本标签好听,真机成功率才是试金石,等实物评测数据说话。

本文由本站自动聚合,以下为原始来源:前往 arXiv cs.RO 论文 阅读全文 →