跳到正文
arXiv · 多模态与生成机制· Hojin Jeon; Jimin Lee; Taekwan Kim; Nayoung Oh; Taeyoung Kim; Myungkyu Koo; Jinmo Koo; Joonwoo Ahn; Jinwoo Shin·· 1 天前精选AI 评分76

PaceVLA:视觉-语言-动作模型中的自适应时间动作量化

PaceVLA: Adaptive Temporal Action Quantization in Vision-Language-Action Models

AI 导读

基于摘要分析。该研究面向机器人操作中视觉-语言-动作(VLA)模型执行步数多、时间效率低的问题,提出 PaceVLA,通过自适应选择动作时间粒度,在加速执行与保留精细控制之间进行协调。其主要研究对象是机器人策略执行,而非 EEG 解码或 BCI 算法。 原问题在于:从遥操作示范学习的策略会保留细粒度时间模式,需要执行较多底层动作;将连续动作聚合为时间粒度更粗的动作可以加速,但也可能丢失精密交互所需的运动细节。PaceVLA 包含两个耦合部分:一是在共享 action expert 上构建模式专用动作解码器,支持多种时间粒度与预测时域;二是由 quantizability 引导的模式选择机制判断是否适合粗粒度执行,再由上下文条件路由器在每个推理步骤选择执行模式。摘要未提供 quantizability 的具体定义、路由监督、损失形式或训练流程。 作者报告,在三个多任务仿真基准和六项真实世界任务中,PaceVLA 提升了执行效率,同时维持任务成功率,评估涵盖多种机器人具身形态、长时程操作与灵巧操作。摘要未给出基准名称、效率指标定义、成功率数值及对照设置,实验协议、消融及统计信息尚未验证。 平台推测(待验证):其自适应时间粒度机制可能用于 BCI 驱动机器人的共享控制,但并不直接解决神经信号解码问题。该假设依赖可执行的机器人动作序列和任务上下文;可考虑复用多模式动作解码与路由思路,但需改造上下文输入,并结合 BCI 指令置信度约束粗粒度执行。低信噪比、跨被试差异及校准数据不足可能导致路由误判,使错误动作持续更久。一个小规模可证伪实验是在固定 BCI 解码器与机器人任务条件下,对比固定时间粒度与自适应粒度,联合记录完成时间、成功率及纠错次数,检验加速是否以更多误操作为代价。已有 EEG 相关工作尚未检索确认。

阅读价值

值得关注其如何通过可量化性判据与上下文路由协调粗粒度执行和精细控制;作者报告机器人任务中的效率收益,但具体评估协议及其对 BCI 控制的适用性尚未验证。

来源:arXiv · 多模态与生成机制 · arxiv.org