诱导部分可观测性下的动力学对齐表征学习
Dynamics-Aligned Representation Learning under Induced Partial Observability
基于摘要分析。本文研究基于模型的强化学习(MBRL)中,观测重建目标可能使表征偏重视觉保真度、潜在动力学先验训练不足及长时域预测不可靠的问题。作者提出训练期随机门控,通过人为控制输入的部分可观测性,促进与动力学相关的表征学习;研究对象是基于像素观测的连续控制,而非 EEG 或 BCI。 具体机制是从 Beta–Bernoulli 随机场采样空间二值掩码,并作用于原始观测;门控概率在每个时间步重新采样,使编码器接触从近乎完全遮挡到近乎完整可见的输入。受门控的观测与二值掩码沿通道维拼接后送入编码器。作者称该方法只需少量架构修改,无须改动更广泛的训练流程;具体损失形式及先验训练改善的证据尚未验证。 作者在 DeepMind Control Suite 的一组像素连续控制任务上,以依赖开环模型滚动预测的模型预测控制进行评估,报告随机门控改善了规划表现与数据效率。作者还报告,表现对掩码空间尺度具有稳健性,训练中较均衡的可观测性优于偏向稀疏或稠密观测的配置。摘要未提供任务清单、基线名称、具体数值及交互预算,实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 任务具有可学习的时序动力学,该机制可能用于检验模型能否在部分通道或时间片不可见时维持预测,而非主要依赖输入重建。可复用的是随机门控与显式掩码输入;需将图像空间掩码改造成符合 EEG 通道拓扑和时间结构的掩码,并明确时序预测监督。低信噪比、小数据及跨被试差异可能使遮挡进一步破坏弱信号,图像控制中的效果不能直接外推。一个可证伪的小实验是在固定被试内划分、模型及训练预算下,对比无门控与不同可见率门控的多步 EEG 预测误差,同时检查完整输入条件下是否退化。已有 EEG 相关工作尚未检索确认。
值得核对的是,作者以输入端随机门控诱导部分可观测性,并通过依赖开环模型滚动预测的规划评估检验潜在动力学表征;其对 EEG 时序建模的价值尚未验证。
来源:arXiv · 表征与预训练 · arxiv.org