跳到正文
OpenReview · Representation learning· Marco Morik; Divyam Rastogi; Rico Jonschkowski; Oliver Brock·· 2019-01-01精选AI 评分72

面向部分可观测环境的基于机器人先验的状态表征学习

State Representation Learning with Robotic Priors for Partially Observable Environments

AI 导读

基于摘要分析。本文研究机器人在部分可观测环境中如何学习低维状态表征,提出 Recurrent State Representation Learning(RSRL),将 Long Short Term Memory(LSTM)网络与机器人先验结合,以利用观测历史近似底层真实状态。 方法上,RSRL 引入与地标有关的新先验,并结合已有机器人先验训练表征;另引入验证网络,用于可视化及定量分析表征质量。摘要未提供具体先验约束、损失形式、输入观测类型或验证网络结构,这些实现细节尚未验证。 在模拟 3D 迷宫的机器人定位任务中,作者报告所学表征具有低维、局部一致的性质,并可近似底层真实状态。将表征用于强化学习时,作者报告其表现与使用真实状态训练相近,并对地标误分类错误具有鲁棒性。摘要未给出具体指标、数值、环境划分或误分类强度,因此上述结论应限定于文中模拟任务;实验协议、消融及统计信息尚未验证。 平台推测(待验证):可探索的迁移假设是,EEG 单个时间窗也可能不足以识别潜在状态,历史观测建模与领域先验约束或可帮助学习时序表征。可复用思路是循环状态编码与独立表征验证,但机器人地标先验不能直接搬用,需要定义具有可观测依据的 EEG 约束,并明确所需监督。低信噪比、跨被试差异、通道变化和小数据均可能使循环模型学习到伪相关。一个可证伪的小实验是在固定 EEG 任务与被试内划分下,比较单窗编码器、仅 LSTM 和 LSTM 加明确领域约束,检查收益是否来自历史信息或约束本身,并核对相邻时间窗划分方式。该假设不是本文已验证的 BCI 结果,相关 EEG 工作尚未检索确认。

阅读价值

值得关注的是以 LSTM 和机器人先验共同学习部分可观测状态、并用验证网络评估表征的路径,但其效果目前仅由摘要中的模拟机器人任务支持,不能据此认定适用于 EEG。

来源:OpenReview · Representation learning · openreview.net