无限状态部分可观测系统中的平均奖励策略评估

基于摘要分析。本文研究离散时间可控动力系统中给定决策策略的平均奖励估计问题：动作集与观测集有限，但状态空间可能无限。核心贡献是借助遍历理论分析策略评估何时可行，并讨论系统可学习性与预测表示能力之间的关系。 问题与机制：摘要指出，与有限状态系统不同，无限状态系统中的某些策略可能不存在期望奖励，使作为最优控制关键步骤的策略评估失效。作者以遍历理论为主要分析工具，探讨不显式构建系统模型时，如何从系统中学习潜在有用的量。这里的“无模型”不等于无假设；论文重点正是厘清使学习与平均奖励评估成立的系统条件。 理论贡献：作者报告，首先通过若干动力系统实例展示不附加假设时一般情形下的学习困难，并提出系统可学习所需的必要条件；其次讨论该条件与当时先进预测表示的关系，说明有些满足该条件的系统仍无法由这些预测表示建模；最后给出此设定下平均奖励策略评估的充分条件。摘要未提供条件的数学形式、所涉及预测表示的具体名称或估计程序，因此不能据此判断其覆盖范围、收敛性质或有限样本误差。 局限与核对重点：实验协议、消融及统计信息尚未验证；全文还需核对平均奖励与期望的精确定义、必要条件与充分条件之间的差距，以及结论对策略类别和系统动态的限制。该文的主要对象是一般部分可观测控制系统，并非 EEG 解码或 BCI 验证；摘要不足以建立具体的 EEG/BCI 迁移机制，已有 EEG 相关工作尚未检索确认。