具身智能🔥8.0
超越重构:机器人策略的动作分词器到底什么才重要?
原标题: 超越重构:机器人策略的动作分词器到底什么才重要?
📋总体概括
arXiv论文2610.09170提出ProAct(Predictable and Robust Action Tokenization),针对VLA等自回归动作token策略中动作分词器的设计缺陷。作者通过大量分析指出:仅靠重构目标训练的分词器虽然能精确还原动作,但不足以保证下游策略成功;策略还需能对新观测预测正确token,且未见过的token预测仍能解码出合理动作。ProAct在分词器训练中显式优化可预测性与鲁棒性,补上了重构目标缺失的环节,对VLA模型动作解码环节的设计具有方法论指导意义。
⚡关键信息
- ▸论文指出动作重构精度只是分词器成功的必要条件之一,并非充分条件
- ▸策略需对新观测预测正确token,且未见过的token预测仍应解码出合理动作
- ▸这些性质由分词器训练决定,但单一重构目标无法直接激励
- ▸提出的ProAct方法在训练中显式优化可预测性与鲁棒性
- ▸研究对象为VLA等自回归动作token策略的连续动作解码环节
🔥犀利点评
这篇论文戳中了VLA领域一个被普遍忽视的盲区:大家卷 backbone、卷数据,却很少追问动作分词器这个『最后一公里』到底该优化什么。重构损失好算、好调,于是成了默认答案,但作者用实验说明token的可预测性和解码鲁棒性才是策略成败的关键。这类问题定义层面的工作比堆料更有价值,可惜摘要截断看不到完整方法与实验规模,落地效果仍待验证。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 arXiv cs.RO 论文 阅读全文 →