跳到正文
OpenReview · State space models· Nadav Amir; Stas Tiomkin; Angela J Langdon·· 2024-06-04精选AI 评分71

学习具有目标导向可控性的状态表征

Learning telic-controllable state representations

AI 导读

基于摘要分析。本文研究资源受限智能体如何学习服务于目标的状态表征,提出通过目标导向(telic)状态耦合环境描述与目标评价的计算框架,并提出学习可控状态表征的算法。原论文的主要对象是自然与人工智能体的目标导向行为,而非 EEG 解码或 BCI。 机制上,作者将用于辨识当前或未来环境状态的“描述性”方面,与用于评价状态是否符合目标的“规范性”方面联系起来。不同于以预定义、固定状态表征为基础构建奖励和价值函数的设定,该框架允许目标反过来塑造所学习的状态表征。作者引入 telic controllability,刻画目标导向状态表征的粒度与到达全部此类状态所需策略复杂度之间的权衡;同时强调有选择地忽略经验特征,以平衡目标灵活性与策略复杂度。 作者报告使用目标发生变化的简单导航任务演示所提算法。摘要未提供具体算法步骤、优化目标、数据规模、对照基线或量化指标,因而不能据此判断性能优势或泛化能力;实验协议、消融及统计信息尚未验证。复现需进一步核对 telic 状态的定义、可控性的计算方式、策略复杂度度量及目标变化的任务设置。 平台推测(待验证):若 BCI 控制任务具有可定义的目标、动作及交互状态转移,该框架可能用于研究“保留哪些状态差异才足以支持目标切换”,而非直接替代 EEG 特征提取。可考虑复用目标相关状态抽象思路,但需将 EEG 观测映射到控制状态,并处理低信噪比、跨被试差异及有限交互数据;过度忽略特征可能合并需要不同动作的状态。一个可检验的小实验是假设在固定 EEG 解码器与相同交互预算下,对比固定状态抽象和目标相关状态抽象,观察目标切换后的任务成功率与策略复杂度是否存在可重复的权衡。该实验仅是迁移假设,已有 EEG 相关工作尚未检索确认。

阅读价值

值得阅读其以 telic controllability 联结目标相关状态粒度与策略复杂度的理论框架,但摘要仅提供简单导航任务的示例,实际适用范围及 EEG/BCI 迁移价值尚未验证。

来源:OpenReview · State space models · openreview.net