跳到正文
arXiv · 多模态与生成机制· Yanqiao Chen; Yuhan Rui; Dongsheng Hou; Zijie Nie; Yutong Wan; Qi Hao·· 6 天前精选AI 评分78

PermVLA:将分解顺序作为 VLA 学习的正则化手段

PermVLA: Factorization Order as a Regularizer for VLA Learning

AI 导读

基于摘要分析。PermVLA 研究 vision-language-action(VLA)策略为何固定按从左到右(LTR)的顺序学习动作块,并将概率分解顺序视为正则化选择。其核心方法 causally anchored permutation(CAP)通过采样不同动作揭示顺序,让同一个策略从不同已知动作子集预测动作,而部署时仍保留确定性的 LTR 控制。 机制上,同一专家轨迹分布允许多种有效的链式法则分解。CAP 在采样揭示顺序时保留长度可调的时间顺序前缀,并使用辅助目标训练共享策略。作者称之为 conditional-set augmentation:不新增示范,而是从同一专家动作块构造多个条件预测问题,以抑制普通 teacher forcing 对单一时间前缀的依赖。摘要未给出辅助损失的具体形式、权重、前缀采样分布及计算开销。 作者报告,在 LIBERO 和 LIBERO-Plus 的受控实验中,CAP 持续优于标准 LTR 训练,在 Cross-dataset CALVIN 评估中也观察到优势;摘要未提供具体指标、数值或划分,不能据此量化改善幅度。作者还报告,通过测量同一动作块在两种揭示顺序下联合对数似然差的期望平方,验证 CAP 学到了跨顺序的一致性,并展示了向 diffusion action generators 的扩展。实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 任务具有带监督的连续运动轨迹输出,这种“对输出条件集合做增强”的机制可能用于动作序列解码,而非直接套用于 MI 分类。可复用的是顺序采样与共享预测器的辅助训练;需改造 EEG 编码、动作条件表示及因果约束。低信噪比、跨被试差异和小数据可能削弱收益,打乱输出顺序也可能损害真实时序依赖。一个可证伪的小实验是在相同示范量、模型和 Cross-subject 划分下比较 LTR 与 CAP 辅助训练,评估轨迹误差及跨顺序一致性,并核对训练条件与在线可用信息的关系。已有 EEG 相关工作尚未检索确认。 复现仍需全文确认动作块长度、训练与推理细节、基线配置、数据处理及实现可用性;摘要中的机器人任务结果不构成 EEG/BCI 有效性的证据。

阅读价值

值得阅读的是其在不增加示范数据、保留 LTR 部署方式的前提下,以多种动作条件子集构造正则化任务,并用跨揭示顺序的一致性诊断检验机制;具体收益与复现条件尚需全文核对。

来源:arXiv · 多模态与生成机制 · arxiv.org