跳到正文

算法、任务与模态

Robotics 最新动态

Robotics 研究索引;按可核对的标签归档,不以热度评价质量。

707 条精选近 30 天 173 条共收录 832 条

更新

精选归档 · 第 36 页

1月1日周四第 701–707 条
  1. OpenReview · State space models70

    通过动态状态空间离散化学习序贯视觉注意控制

    基于摘要分析。本文研究交互环境中智能体如何在感知资源受限时学习自顶向下的序贯视觉注意控制,提出通过自动构建并离散化视觉状态空间,将注意策略与视觉表征共同学习的方法。原论文的主要对象是机器人视觉与动作控制,而非 EEG 解码或 BCI。 核心机制是用树表示自顶向下的注意控制,并在出现状态混淆(aliasing)时增量细化树结构,选择最合适的扫视方向。其思路是让状态表示随注意控制需求动态调整,而不是仅依赖预先固定的视觉状态划分。摘要未说明状态混淆的判定标准、方向选择准则、学习目标或具体更新规则;这里的 state space 指视觉状态空间,不能据此将方法归入现代序列建模中的 State Space Models。 作者报告,在基于动作的物体识别与城市导航任务上,结果支持该扫视控制方法对机器人的适用性与实用性。摘要未提供数据集、任务划分、基线、指标或数值,因此无法核对收益幅度及比较条件;实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 系统需要根据当前观测主动选择后续采样通道或时间窗,状态混淆触发的动态离散化可能提供一种控制思路。该假设依赖可交互的观测选择过程及任务反馈;树的增量细化机制可能复用,但视觉状态表示与扫视动作需要重新定义。低信噪比、跨被试差异和小样本可能使状态细分追随噪声。一个可检验的小实验是在固定被试内划分与相同采样预算下,比较动态状态细分和固定状态划分的主动观测策略,检验是否改善解码表现。相关 EEG 工作尚未检索确认,这不构成已证实的迁移效果。

    阅读价值:值得阅读的是将视觉表征、状态空间离散化与序贯注意控制共同学习的机制;摘要提供了机器人任务中的适用性证据,但其对 EEG/BCI 的价值尚未验证。

12月31日周三
  1. OpenReview · State space models72

    基于自身与其他智能体状态价值估计的高效行为学习

    基于摘要分析。该研究针对多智能体动态环境中强化学习面临的维度灾难,提出模块化的两层分层学习方法,通过低层状态价值压缩高层状态表示,并估计其他智能体接近其自身目标的程度,以学习队友间的协作及对手间的竞争行为。主要研究对象是 RoboCup 类机器人比赛中的行为学习,并非 EEG 解码或 BCI。 方法包含两个关键机制:一是采用具有多个学习模块的两层系统,高层状态由低层模块的状态价值构成,并使用宏动作缩减物理动作空间;二是通过观察估计其他智能体的目标进展,将其作为高层状态变量,使决策能够考虑队友与对手的处境。这里的核心是强化学习中的状态价值表示与分层决策,不能因来源分类而将其解释为现代序列建模中的 State Space Model。 作者报告,在四名防守方对五名进攻方的比赛任务中,进攻方的传球智能体学会了传球与射门的团队配合,且学习用时更短。摘要未给出具体用时、对照方法、奖励设计、价值估计更新方式或重复实验信息,因而无法量化效率收益;实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 BCI 共享控制任务具备可定义的子任务价值、宏动作和协作方目标,可能借鉴其高层状态压缩思路,但这不是将该方法直接用于 EEG 分类的依据。迁移需要改造低层状态估计及协作方目标估计,低信噪比和有限交互数据可能使价值估计不稳定。一个可检验的小实验是在固定解码器与交互预算的共享控制仿真中,比较加入或不加入协作方目标进展估计时的任务成功率与学习步数。相关 EEG/BCI 工作尚未检索确认。

    阅读价值:该研究值得关注之处是将低层状态价值与对其他智能体目标进展的估计共同用于高层决策,为分析多智能体协作中的状态压缩提供了具体机制,但摘要不足以核实学习效率提升的幅度及其适用条件。

1月1日周二
  1. OpenReview · State space models79

    状态的指数族预测表示

    基于摘要分析。该学位论文研究部分可观测动力系统中如何选择并维护状态表示,提出以短期未来观测的统计量表示状态,而非将状态视为不可观测的潜变量,并重点考察以未来观测窗口的指数族分布参数定义状态的模型及学习算法。 核心机制是将历史压缩为对短期未来的预测,再利用这一预测性状态支持更长时间范围的预测。摘要指出,模型参数均以可观测量定义,由此构建相应的学习方法;论文还在这一框架下统一若干已有模型,并推导、分析新的模型。其主要研究对象是一般的智能体—环境交互与时序预测,覆盖部分可观测、连续观测、结构化观测、高维观测及连续动作等情形,并非 EEG 或 BCI 研究。 作者报告,在标准 POMDPs 和基准非线性时间序列问题上,模型表现与当时先进模型相当;在交通预测及类似配备摄像头的自主移动机器人等领域,也能处理比其他预测性状态模型更大规模的问题。摘要未提供具体数据集、划分、指标、数值或对照模型名称,这些结论的实验协议、消融及统计信息尚未验证;状态更新形式、指数族选择与实现条件也需查阅全文。 平台推测(待验证):一个可检验的假设是,预测性状态可作为 EEG 历史信息的压缩表示,辅助处理部分可观测的动态过程。可借鉴未来窗口统计量的状态定义,但需要改造观测分布、窗口及状态更新机制;连续 EEG 的低信噪比、跨被试差异和通道变化可能使未来统计量难以稳定估计,小数据也可能限制学习。小规模验证可在固定通道与被试内时间顺序划分下,比较此类表示与线性状态空间基线的未来 EEG 预测误差,核对预测窗口不跨越划分边界,再评估是否值得扩展到解码任务。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的是以可观测未来的指数族分布参数定义状态的建模思路,可用于审视部分可观测时序系统的状态表示与更新;其对 EEG 的适用性尚未验证。

  2. OpenReview · State space models73

    通过可扩展控制策略的潜在空间调制合成新运动

    基于摘要分析。本文研究如何从少量示范中学习并合成一整类高维运动,前提是这些运动满足某些未直接观测的低维任务约束。核心贡献是以非线性降维提取潜在空间,再在其中用控制策略对运动进行参数化,通过调制策略生成同类新运动。 机制上,作者希望所提取的规范潜在空间能够保留未观测任务空间的部分关键拓扑,并找到便于调制、对扰动稳健的运动控制策略。摘要未给出具体降维算法、控制策略形式、学习目标或扰动处理机制,不能据此推断其采用某种状态空间模型。 作者报告,在简单机器人的受控仿真中评估了 reaching 与 periodic movement 任务,并使用高维人体 punching 运动数据进行验证;在机器人和人体数据中,均能从少量示范生成同类运动的连续变化。示范数量、数据划分、对照方法、定量指标及扰动鲁棒性的具体证据尚未验证,实验协议、消融及统计信息也需查阅全文。 平台推测(待验证):该机制可能与 BCI 下游辅助设备的低维意图到高维动作控制衔接有关,而非直接解决 EEG 解码。可复用部分是动作潜在空间与策略调制机制;需改造的是 BCI 输出到潜在控制参数的映射及安全约束。其假设是目标动作确实具有可由少量示范覆盖的低维结构;低信噪比、跨被试变化和小数据可能使控制参数估计失稳。一个可检验的小实验是在固定机器人 reaching 任务中,向潜在控制参数注入不同程度的估计噪声,与直接调制高维控制参数的方案比较目标误差及扰动恢复表现;这仅检验控制接口的耐噪性,不证明 EEG/BCI 有效。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对其如何将非线性降维所得潜在空间与可调制控制策略结合,以少量示范生成同类新运动;摘要支持运动合成方向的阅读价值,但不构成 EEG/BCI 有效性的证据。

12月31日周一
  1. OpenReview · State space models73

    基于其他智能体状态价值估计的多智能体环境快速行为学习

    基于摘要分析。本文研究多智能体动态环境中,其他智能体及其行为导致状态与动作空间膨胀、进而拖慢强化学习的问题,提出利用分层模块化学习及其他智能体状态价值估计,学习队友间的协作行为与针对对手的竞争行为。 核心机制是两层层次结构:底层包含多个学习模块,高层以底层输出的状态价值构造状态空间,并采用宏动作压缩物理动作空间。系统还通过观察,估计其他智能体距离其自身目标的接近程度,将该估计作为高层状态中的价值信息。其方法重点是以任务相关的价值表示组织决策,而非直接在完整感知与动作空间中学习。 作者报告,在防守方4个智能体对进攻方5个智能体的比赛任务中,学习智能体获得了传球、射门等团队配合行为,学习速度相较早期工作提高至约30倍。该结果限于摘要描述的比赛任务;早期工作的具体基线、训练预算、学习完成判据、重复试验及统计信息尚未验证,不能据此推导其他任务上的加速幅度。底层模块如何学习、其他智能体的目标与价值如何估计,以及宏动作如何定义,也需查阅全文确认。 研究的主要对象是RoboCup类多智能体行为学习,并非EEG解码或BCI控制。现有材料不足以建立其与EEG瓶颈的具体机制对应,因此不据此提出BCI迁移效果或复现实验建议。

    阅读价值:值得核对其如何将底层状态价值与其他智能体的目标接近程度组合为高层状态,以缓解多智能体强化学习的维度问题;摘要中的学习加速结论仍需结合原始对照协议验证。

12月31日周三
  1. OpenReview · State space models73

    多智能体环境中用于移动机器人学习的基于视觉的状态空间构建

    基于摘要分析。本文研究多智能体环境中移动机器人如何从视觉观测构建适合强化学习的状态空间,提出通过观察与动作交互进行系统辨识,估计学习机器人行为与其他智能体行为之间的关系,再利用 Akaike’s Information Criterion(AIC,赤池信息准则)确定各智能体的状态向量。 核心问题是:其他智能体的策略未知,其动作会改变机器人看到的视觉信息,使观测变化难以直接归因于机器人自身运动。方法先辨识交互关系并构造状态表示,再基于估计的状态向量进行强化学习以获取最优行为。这里的“state space”指机器人强化学习中的状态空间构建,摘要并未描述现代序列建模中的 State Space Model 架构。 作者报告将方法应用于机器人足球场景中的实体智能体,使其学习应对滚动的球和另一移动智能体,并展示计算机仿真及真实实验。摘要未提供定量结果、对照方法或状态估计误差,因此不能据此判断性能提升幅度。系统辨识的具体形式、AIC 候选模型、视觉特征、强化学习算法,以及实验协议、消融及统计信息尚未验证。 平台推测(待验证):若用于具有动作反馈和环境观测的闭环 BCI,该机制可能帮助区分用户控制引起的环境变化与外部对象运动,但它并非直接针对 EEG 解码。可复用的是交互辨识与状态选择思路;视觉观测模型需改造为神经信号、控制输出及环境反馈的联合表示。此假设依赖可对齐的时序交互数据,EEG 低信噪比、反馈延迟、跨被试差异和小数据可能使辨识不稳定。一个可检验的小实验是在固定 EEG 解码器与控制策略下,比较加入辨识状态和仅用当前观测的闭环任务表现,并分别设置静态与移动干扰对象;已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的是其通过交互式系统辨识与 Akaike’s Information Criterion 构造多智能体强化学习状态空间的机制,但摘要不足以验证状态估计质量、学习效果及其对 EEG/BCI 的适用性。

12月31日周二
  1. OpenReview · State space models73

    用于机器人学习的基于动作的传感器空间分类

    基于摘要分析。本文研究视觉移动机器人学习中状态空间与动作空间相互依赖的问题,提出依据动作可达性构造状态空间的方法,而非预先固定状态划分。其贡献是将传感输入聚类与动作序列抽象结合,形成用于规划的状态转移图。 核心机制是:若一组输入向量对应的情形均可通过重复执行同一种动作原语,到达目标状态或已经构造出的状态,则将这些输入向量归为一个状态簇,不以动作序列长度作为区分依据;同时,将该重复动作序列定义为一个动作。方法依赖大量机器人交互经验,以超椭球对输入向量进行聚类,从而把传感器空间划分为按动作组织的状态转移图,并据此获得最优动作序列。这里的状态空间指机器人学习中的状态表示,摘要并未将其描述为现代序列建模中的 State Space Models。 作者报告将方法用于尝试把球射入球门的足球机器人,并展示了仿真与真实机器人实验。摘要未提供成功率、样本量、对照方法或最优性的评价条件,因此不能量化其收益;实验协议、消融及统计信息尚未验证。复现需进一步核对视觉输入表示、动作原语、超椭球拟合与归簇规则、经验采集方式及转移图规划过程。 平台推测(待验证):该机制可能为闭环 BCI 中依据控制后果构造状态抽象提供参考,但这只是迁移假设,不是 EEG 解码效果的证据。可复用的是可达性分组与动作序列抽象,需改造的是神经信号特征、反馈状态和动作完成判据,并依赖带动作及结果记录的交互数据。低信噪比、跨被试差异、通道变化和小数据可能使状态簇及可达性估计不稳定。一个可检验的小实验是在固定被试与通道的闭环光标任务中,用同一批训练交互数据比较动作可达性聚类与仅按 EEG 特征聚类,并在独立测试交互中评价目标到达率和控制步数。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读其以动作可达性定义状态、联合构造状态与动作抽象的机制,但足球机器人验证的具体效果及其对 EEG/BCI 的适用性尚未验证。