跳到正文
OpenReview · State space models· Thomas Delliaux; Nguyen-Khanh Vu; Vincent François-Lavet; Elise van der Pol; Emmanuel Rachelson·· 2025-01-01精选AI 评分75

学习具有群结构潜空间的抽象世界模型

Learning Abstract World Models with a Group-Structured Latent Space

AI 导读

基于摘要分析。本文研究如何从有限数据中学习有助于泛化的 Markov Decision Processes(MDPs)抽象模型,核心贡献是在学习到的转移模型的低维表示流形中引入几何先验,以显式编码环境中已知的对称结构。 机制上,方法通过选择适当的潜空间及其关联的群作用,表达环境中的不变性先验,同时允许嵌入不受这些对称性约束的额外非结构化信息。其关键区别不是仅压缩状态,而是让部分潜表示具有预设的几何结构,同时保留表达其他因素的能力。具体群的选择、表示分解方式、损失函数以及训练与推理流程尚未验证。 作者报告,在具有旋转和平移特征的环境中,包括三维环境的第一人称视角,该方法相较完全非结构化的方法获得了更好的潜空间转移预测和下游 RL 学习表现,并形成更简单、更解耦的表示。摘要未提供环境名称、数据规模、划分、基线细节或定量指标,实验协议、消融及统计信息尚未验证。摘要称完整代码已在 GitHub 提供,但当前材料未提供仓库链接,具体实现与复现条件仍需核对。 平台推测(待验证):其与 EEG/BCI 的潜在联系限于具有明确状态、动作和可验证对称变换的闭环控制场景,而非直接作为通用 EEG 解码方法。可复用的是群结构潜空间与非结构化信息并存的设计;需改造的是 EEG 观测编码器,以及符合任务语义的状态和动作变换。假设任务空间旋转确实保持控制动力学结构,可在固定数据划分和相同模型容量下,比较群结构模型与非结构化模型在未见目标方向上的转移预测和闭环控制表现。EEG 低信噪比、通道布局变化、跨被试差异及小数据可能破坏这种对应;任务空间旋转也不能直接视为 EEG 通道旋转。已有 EEG 相关工作尚未检索确认。

阅读价值

值得关注其将已知对称性与非结构化信息共同嵌入世界模型潜空间的机制;作者报告了转移预测及下游 RL 收益,但其对 EEG/BCI 的适用性尚未验证。

来源:OpenReview · State space models · openreview.net