跳到正文
OpenReview · State space models· HyeongJoo Hwang; Seokin Seo; Youngsoo Jang; Sungyoon Kim; Geon-Hyeong Kim; Seunghoon Hong; Kee-Eung Kim·· 2023-01-01精选AI 评分73

用于多视图强化学习的信息论状态空间模型

Information-Theoretic State Space Model for Multi-View Reinforcement Learning

AI 导读

基于摘要分析。本文研究 Multi-View Reinforcement Learning(MVRL):智能体如何利用多个来源的观测学习最优控制,尤其关注观测之间的时间依赖,以及部分视图间歇性缺失的问题。作者提出 Fuse2Control(F2C),以信息论方法从多视图观测序列中捕获底层状态空间模型,为控制任务聚合相关信息。 机制与贡献:原问题并非一般的多视图表示学习,而是面向控制的时序状态建模。其核心思路是从多来源序列中提取与任务相关的潜在状态,处理单纯提取多视图表示难以直接适用于控制的问题。摘要未提供信息论目标的具体形式、状态转移与观测模型的参数化方式、训练损失或推理流程,不能据此将 F2C 等同于某类具体状态空间网络。 结果与证据边界:作者报告,在多种控制任务的实验中,F2C 能有效聚合多个视图中的任务相关信息,随视图数量线性扩展,并对任意视图缺失情形保持鲁棒性。摘要未列明任务名称、数据规模、对照基线、指标或数值,也未说明线性扩展对应计算量、内存还是其他量;缺失模式、实验协议、消融及统计信息尚未验证。 平台推测(待验证):若将多来源神经信号或辅助传感器表示为时间对齐的观测视图,该方法可能对应 BCI 中多模态融合与输入缺失的瓶颈。可考察复用状态建模与视图聚合思路,但观测编码、时序对齐及控制反馈需针对 EEG 改造;低信噪比、跨被试差异和小样本可能使潜在状态捕获非任务因素。一个可检验的假设是:在固定数据划分和训练预算下,加入控制相关状态建模能否比简单融合更好地抵抗视图缺失;可先在具备控制反馈的多视图小规模任务中,对照完整输入与预设缺失模式测试。原文未报告 EEG/BCI 验证,已有 EEG 相关工作尚未检索确认。

阅读价值

值得关注其将多视图时序观测融合为控制相关潜在状态、并处理间歇性视图缺失的机制,但具体信息论目标、线性扩展的计量对象及缺失协议仍需全文核对。

来源:OpenReview · State space models · openreview.net