跳到正文

算法、任务与模态

Robotics 最新动态

Robotics 研究索引;按可核对的标签归档,不以热度评价质量。

182 条精选近 30 天 85 条共收录 222 条

更新

精选归档 · 第 10 页

12月31日周三第 181–182 条
  1. OpenReview · State space models73

    多智能体环境中用于移动机器人学习的基于视觉的状态空间构建

    基于摘要分析。本文研究多智能体环境中移动机器人如何从视觉观测构建适合强化学习的状态空间,提出通过观察与动作交互进行系统辨识,估计学习机器人行为与其他智能体行为之间的关系,再利用 Akaike’s Information Criterion(AIC,赤池信息准则)确定各智能体的状态向量。 核心问题是:其他智能体的策略未知,其动作会改变机器人看到的视觉信息,使观测变化难以直接归因于机器人自身运动。方法先辨识交互关系并构造状态表示,再基于估计的状态向量进行强化学习以获取最优行为。这里的“state space”指机器人强化学习中的状态空间构建,摘要并未描述现代序列建模中的 State Space Model 架构。 作者报告将方法应用于机器人足球场景中的实体智能体,使其学习应对滚动的球和另一移动智能体,并展示计算机仿真及真实实验。摘要未提供定量结果、对照方法或状态估计误差,因此不能据此判断性能提升幅度。系统辨识的具体形式、AIC 候选模型、视觉特征、强化学习算法,以及实验协议、消融及统计信息尚未验证。 平台推测(待验证):若用于具有动作反馈和环境观测的闭环 BCI,该机制可能帮助区分用户控制引起的环境变化与外部对象运动,但它并非直接针对 EEG 解码。可复用的是交互辨识与状态选择思路;视觉观测模型需改造为神经信号、控制输出及环境反馈的联合表示。此假设依赖可对齐的时序交互数据,EEG 低信噪比、反馈延迟、跨被试差异和小数据可能使辨识不稳定。一个可检验的小实验是在固定 EEG 解码器与控制策略下,比较加入辨识状态和仅用当前观测的闭环任务表现,并分别设置静态与移动干扰对象;已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的是其通过交互式系统辨识与 Akaike’s Information Criterion 构造多智能体强化学习状态空间的机制,但摘要不足以验证状态估计质量、学习效果及其对 EEG/BCI 的适用性。

12月31日周二
  1. OpenReview · State space models73

    用于机器人学习的基于动作的传感器空间分类

    基于摘要分析。本文研究视觉移动机器人学习中状态空间与动作空间相互依赖的问题,提出依据动作可达性构造状态空间的方法,而非预先固定状态划分。其贡献是将传感输入聚类与动作序列抽象结合,形成用于规划的状态转移图。 核心机制是:若一组输入向量对应的情形均可通过重复执行同一种动作原语,到达目标状态或已经构造出的状态,则将这些输入向量归为一个状态簇,不以动作序列长度作为区分依据;同时,将该重复动作序列定义为一个动作。方法依赖大量机器人交互经验,以超椭球对输入向量进行聚类,从而把传感器空间划分为按动作组织的状态转移图,并据此获得最优动作序列。这里的状态空间指机器人学习中的状态表示,摘要并未将其描述为现代序列建模中的 State Space Models。 作者报告将方法用于尝试把球射入球门的足球机器人,并展示了仿真与真实机器人实验。摘要未提供成功率、样本量、对照方法或最优性的评价条件,因此不能量化其收益;实验协议、消融及统计信息尚未验证。复现需进一步核对视觉输入表示、动作原语、超椭球拟合与归簇规则、经验采集方式及转移图规划过程。 平台推测(待验证):该机制可能为闭环 BCI 中依据控制后果构造状态抽象提供参考,但这只是迁移假设,不是 EEG 解码效果的证据。可复用的是可达性分组与动作序列抽象,需改造的是神经信号特征、反馈状态和动作完成判据,并依赖带动作及结果记录的交互数据。低信噪比、跨被试差异、通道变化和小数据可能使状态簇及可达性估计不稳定。一个可检验的小实验是在固定被试与通道的闭环光标任务中,用同一批训练交互数据比较动作可达性聚类与仅按 EEG 特征聚类,并在独立测试交互中评价目标到达率和控制步数。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读其以动作可达性定义状态、联合构造状态与动作抽象的机制,但足球机器人验证的具体效果及其对 EEG/BCI 的适用性尚未验证。