跳到正文
OpenReview · State space models·· 26 天前精选AI 评分74

用于闭式连续时间液态神经网络的状态条件谱传播

State-Conditioned Spectral Propagation for Closed-Form Continuous-Time Liquid Neural Networks

AI 导读

基于摘要分析。本文研究不规则观测序列中短期波动与长期趋势并存时,如何为隐藏状态提供自适应的多重衰减时间尺度,同时保留闭式传播。作者提出 State-Conditioned Spectral Closed-Form Continuous-Time Network(SC-SCfC),并进一步引入状态条件矩阵分配机制(SC-MA),使衰减不再局限于固定坐标轴。 SC-SCfC 将相邻观测之间的隐藏状态演化建模为朝向区间目标的多指数衰减混合,使单个状态分量能够混合快、慢衰减率。SC-MA 则使用总和为单位矩阵的半正定分配矩阵,将当前状态与目标之间的残差分解为潜在空间中的向量分量,让各分量沿数据依赖的方向以各自速率衰减。每个观测间隔内参数保持固定,从而保留闭式传播;这里的区间内固定不等于整个序列使用不变参数。 作者报告,在四类基准上的分类和剩余使用寿命回归任务中取得了有竞争力的表现。摘要未提供基准名称、数据划分、对照方法或具体指标,无法判断收益来自多时间尺度混合还是方向自适应分配;实验协议、消融及统计信息尚未验证。区间目标、衰减率及分配矩阵的具体参数化与训练方式也需核对全文。 平台推测(待验证):假设 EEG 任务存在缺测或不规则观测,该方法的连续时间传播及多时间尺度机制可能有助于建模不同速度的动态变化,但原领域结果不等于 BCI 有效。可复用的是状态传播机制,输入编码、通道处理和任务输出需按 EEG 改造;低信噪比、跨被试差异和小数据可能使数据依赖方向估计不稳定,通道缺失也不等同于时间采样不规则。一个可证伪的小实验是在固定被试内划分与相同输入编码下,以匹配的观测点缺失设置比较 SC-SCfC 与 SC-MA,检验方向分配是否带来稳定增益。相关 EEG 工作尚未检索确认。

阅读价值

值得核对其如何通过半正定矩阵分配实现数据依赖方向上的多时间尺度衰减,同时保留区间内闭式传播;其对 EEG 不规则采样建模的价值尚未验证。

来源:OpenReview · State space models · openreview.net