跳到正文
OpenReview · State space models· Helei Duan; Jeremy Dao; Kevin Green; Taylor Apgar; Alan Fern; Jonathan W. Hurst·· 2020-01-01精选AI 评分75

学习用于双足运动的任务空间动作

Learning Task Space Actions for Bipedal Locomotion

AI 导读

基于摘要分析。该研究针对双足机器人强化学习中动作表示与高层运动目标不易对接的问题,提出学习以足部设定点为动作的任务空间策略,并通过基于模型的逆动力学控制器将其转换为关节级控制。主要贡献是把机器人系统知识嵌入策略执行结构,使学习不必直接承担全部关节协调任务;研究对象是机器人运动控制,而非 EEG 或 BCI 信号建模。 核心机制与对照:摘要指出,既有工作主要学习关节协调控制器,以跟随已有控制器生成的关节轨迹为目标,因而较难直接表达期望足端运动或地面反作用力等高层目标。本文明确采用足部设定点作为任务空间动作,由逆动力学控制器完成到关节控制的映射;摘要未说明地面反作用力是否也作为策略动作,不能据此扩展其动作定义。作者报告,相较纯关节空间动作学习,该方法具有更高的样本效率,并产生期望的任务空间动力学。 验证与复现边界:作者报告在仿真中验证了方法,并展示所学策略能够迁移到真实双足机器人 Cassie。摘要未提供强化学习算法、奖励函数、机器人模型精度、训练规模、仿真到现实迁移流程、具体指标或效果幅度,实验协议、消融及统计信息尚未验证。复现时需核对任务空间动作的定义、逆动力学控制器实现,以及任务空间与关节空间基线的训练条件是否可比。 平台推测(待验证):该机制可能对具有机器人执行端的 BCI 控制系统提供动作接口设计启发,即由解码器输出高层足端目标,再交由动力学控制器执行,而非直接解码全部关节命令。其依赖准确的机器人模型与可执行的高层目标,不能直接解决 EEG 低信噪比、跨被试或小数据解码问题;可复用的是控制接口,需另行设计和训练神经信号解码模块。一个可检验的小实验是在同一机器人仿真与相同目标指令下,比较足端目标接口和关节指令接口对受控输入噪声及延迟的敏感性,评估跟踪误差与稳定性;这仅检验接口鲁棒性,不构成 BCI 有效性证据。相关 EEG/BCI 工作尚未检索确认。

阅读价值

值得关注其将任务空间策略与基于模型的逆动力学控制器结合的机制:作者报告相较纯关节空间动作学习提高了样本效率,并展示向真实 Cassie 机器人的迁移,但具体评估协议与效果幅度尚未验证。

来源:OpenReview · State space models · openreview.net