跳到正文
OpenReview · State space models· Matthew Dowling; Yuan Zhao; Il Memming Park·· 2023-09-23精选AI 评分79

指数族动力系统的平滑推断

Smoothing for exponential family dynamical systems

AI 导读

基于摘要分析。本文研究非线性或非高斯状态空间模型中的潜在过程后验推断,提出保留后验时间结构、且推断计算量随序列长度线性扩展的结构化变分近似。主要研究对象是一般时序数据的潜在动力学,而非专门的 EEG 或 BCI 解码。 核心机制:作者将框架推广到 exponential family dynamical systems,构建具有简单更新形式的解耦二阶推断算法,并称其不增加计算复杂度。进一步提出 auto-encoding backward factorized smoother,以便利用现代深度学习工具;针对更适合顺序推断的场景,通过新的后向平滑目标提出 variational Bryson-Frazier 算法。摘要未给出变分分布的具体因子分解、目标函数、二阶更新推导及训练细节,这些内容尚未验证。 验证与局限:作者报告与多种状态空间模型推断算法进行了比较,并通过数值实验验证所述理论。摘要未提供数据集、序列规模、对照算法名称、精度或运行时间指标,因此不能据此判断其优势幅度。实验协议、消融及统计信息尚未验证;还需核对线性复杂度结论的适用条件,以及潜在状态维度对计算成本的影响。 平台推测(待验证):若 EEG 分析任务可表述为具有潜在动力学的状态空间模型,该方法可能用于离线潜在状态估计,针对非高斯观测下保留时间依赖的推断需求。可复用部分是结构化变分近似与后向平滑思路;需按 EEG 特征改造观测分布、动力学假设及编码器。其适用性依赖这些建模假设与数据相符,跨被试和通道差异、低信噪比及小数据可能使后验近似或参数估计不稳定。平滑通常利用后续观测,不应直接等同于实时因果 BCI 推断。一个可检验的小实验是在含已知潜在状态的 EEG 风格模拟序列上,固定生成模型与训练数据,对比结构化平滑和简单变分近似的状态恢复误差及运行时间随序列长度的变化;这只能检验推断机制,不能证明 BCI 解码收益。已有 EEG 相关工作尚未检索确认。

阅读价值

值得阅读的是其在保留潜在后验时间结构的同时实现序列长度线性扩展的结构化变分平滑思路;作者以数值实验验证理论,但具体精度、效率及 EEG 适用性尚未验证。

来源:OpenReview · State space models · openreview.net