具身智能🔥7.0

T-WLA:弥合慢速视觉与快速触觉的鸿沟

原标题: T-WLA:弥合慢速视觉与快速触觉的鸿沟

arXiv cs.RO 论文·2026/10/22 04:00:00🔗 原文

📋总体概括

研究团队提出T-WLA架构,解决接触密集操作中视觉策略更新慢、触觉反馈无法独立指导动作修正的问题。该架构通过共享视觉记忆同时驱动动作生成与触觉修正:视觉分支在每次更新时整合图像、任务指令与检索历史生成视觉记忆并缓存,轻量触觉编辑器则结合缓存记忆、当前动作块与触觉输入,直接预测未执行动作的残差修正,无需重跑视觉分支,降低延迟。架构还包含未来图像与未来压力预测,用于增强模型对动态接触场景的前瞻性理解。

⚡关键信息

  • ▸T-WLA是世界-语言-动作架构,用共享视觉记忆统一指导动作生成与触觉修正
  • ▸视觉分支每次更新整合当前图像、任务指令与检索历史,生成条件化视觉记忆
  • ▸轻量触觉编辑器基于缓存记忆和触觉输入,直接对未执行动作预测残差修正,避免重跑视觉策略的延迟
  • ▸架构引入未来图像预测与未来压力预测,提升对接触变化的前瞻建模能力
  • ▸针对视觉策略更新间隙接触条件可能已改变的核心痛点设计

🔥犀利点评

这篇论文戳中了具身智能操 作最尴尬的时序错配:视觉是10Hz级的慢脑,触觉是千赫兹级的快反射,让视觉策略实时重算是奢侈品。T-WLA的聪明之处在于「记忆共享+残差修正」——视觉算一次,触觉轻量接力,相当于把系统拆成快慢双脑而非死磕单一策略。未来图像与压力预测的双前置任务设计也说明作者深知:没有世界模型式的预测能力,触觉修正就是无源之水。能否在真实接触密集任务上稳定泛化,才是检验这套架构的试金石。

本文由本站自动聚合,以下为原始来源:前往 arXiv cs.RO 论文 阅读全文 →