跳到正文
arXiv · 表征与预训练· Xuhui Kang; Sung-Wook Lee; Yan Zhuang; Tianle Zhong; Yen-Ling Kuo·· 6 天前精选AI 评分76

RARA:通过检索锚定表征对齐实现机器人操作策略的稳健微调

RARA: Robust Policy Fine-Tuning through Retrieval-Anchored Representation Alignment for Robotic Manipulation

AI 导读

基于摘要分析。本文研究预训练机器人策略在少量示范下适应新任务时的表征漂移问题,提出 Retrieval-Anchored Representation Alignment(RARA),通过检索锚定的两阶段适应,在学习目标动作的同时保留预训练知识。研究对象是机器人操作策略,包括 Vision-Language-Action(VLA)模型,而非 EEG/BCI 解码。 第一阶段,RARA 从预训练数据中检索任务意图和运动相似的示范,将策略对目标示范的表征与检索示范的预训练表征对齐;第二阶段,在目标示范上微调策略,同时限制检索示范表征的变化。其核心思路是在动作学习前减小表征不匹配,并在微调期间约束不必要的漂移。具体检索度量、对齐目标、约束形式及训练配置尚未验证。 作者报告,在使用 Diffusion Policy 和 GR00T、覆盖 RoboTwin、RoboCasa 及真实机器人共 13 项任务的实验中,RARA 相较微调的平均成功率在分布内提高 9.5 个百分点、分布外提高 13.6 个百分点,并优于所比较的全部基线。摘要未展开任务划分、分布偏移类型、示范数量、基线配置及统计不确定性,实验协议、消融及统计信息尚未验证。 平台推测(待验证):其潜在可迁移点是以相关预训练样本约束少样本适应时的表征漂移,而非机器人动作学习本身。若 EEG 预训练模型具有可访问的源数据与可比较的任务表征,可尝试复用检索与表征保持机制;但任务意图和运动相似度需改造为适合 EEG 的检索依据。低信噪比、被试差异及通道配置不一致可能使检索匹配失效,过强约束也可能阻碍必要的域适应。一个可检验的假设是:在固定 Cross-subject 划分和相同少量目标标注预算下,比较直接微调与检索锚定适应,并加入随机检索对照,检验收益是否确实来自相关源样本。相关 EEG 工作尚未检索确认。

阅读价值

值得关注其以检索样本为表征锚点、分阶段抑制少样本微调漂移的机制,但机器人任务上的作者报告结果尚不能证明其对 EEG/BCI 适应有效。

来源:arXiv · 表征与预训练 · arxiv.org