跳到正文

算法、任务与模态

Time Series 最新动态

Time Series 研究索引;按可核对的标签归档,不以热度评价质量。

29 条精选近 30 天 29 条共收录 29 条

更新

精选归档 · 第 2 页

10月4日周日第 21–29 条
  1. arXiv · 时序与音频基础模型75

    Pythia:迈向多模态时间序列基础世界模型

    基于摘要分析。Pythia 针对异构时间序列中可复用多模态预测表示不足的问题,通过 joint-embedding predictive architecture 学习由上下文条件化的潜在动态,并将世界模型预训练与观测空间中的概率预测分离。 核心机制是使用 stop-gradient 数值参考,引导上下文信息对预测未来状态进行修正;随后由独立概率解码器结合冻结的预测表示与观测历史完成预测。该设计将潜在动态表示的学习与概率输出适配解耦。摘要未提供具体损失形式、上下文编码方式、预训练数据构成或模型规模,这些细节尚未验证。 作者报告,在 MUSE 上,Pythia-Tiny 的归一化 mean absolute scaled error(MASE)为 0.6879,weighted sum quantile loss(WSQL)为 0.4269,相对于已发布 MUSE 排行榜中被评估的最强模型,误差分别降低 6.26% 和 5.00%。这些是相对降幅,不是百分点变化;摘要未说明对照模型名称、数据划分及指标聚合方式,不能据此推断其他协议下的优势。作者还报告,受控实验支持将预测表示学习与概率读出分离,并显示实体描述、事件和协变量具有互补贡献。实验协议、消融及统计信息尚未验证。 平台推测(待验证):其上下文条件化动态表示可能用于探索 EEG 信号与任务描述、事件标记及协变量的联合建模,但原领域结果不等于 BCI 有效。可复用思路是潜在动态预测和独立读出;需要改造 EEG 输入表示、通道组织及事件时间对齐。低信噪比、跨被试差异、通道不一致和小数据规模可能削弱上下文收益。一个可证伪的小实验是在固定 Cross-subject 划分下,对比仅数值输入、加入真实事件上下文及打乱上下文的未来 EEG 预测误差,检验收益是否确实来自上下文。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对其将多模态潜在动态预训练与概率预测解耦的机制,以及文本、事件和协变量的受控对照;摘要报告了 MUSE 上的误差改善,但具体评估协议与统计可靠性尚未验证。

  2. arXiv · 时序与音频基础模型76

    LogSig-SSM:面向状态空间模型的多尺度 log-signature 压缩时序建模

    基于摘要分析。LogSig-SSM 针对高频、不规则采样且具有长程依赖的多变量时序,先以多尺度窗口化 log-signature 将长序列压缩为较短的 token 序列,再用选择性状态空间模型(SSM)建模长程依赖,旨在兼顾连续时间方法的输入表征能力与 SSM 的计算效率。 核心机制是由 log-signature token 表征高阶跨通道交互,再交由选择性 SSM 骨干处理。作者将其定位为对 NCDE、NRDE 长序列扩展成本,以及 Mamba 单个模块内隐维度间递归混合受限问题的回应。摘要还给出连续时间解释:模型可视为由 log-signature 输入驱动的 NCDE/NRDE 风格系统,选择性机制对应潜在动力学的输入依赖重缩放。窗口尺度、log-signature 截断阶数、损失、训练配置及具体骨干实现尚未验证。 作者报告,在 UEA 长序列分类、PPG-DaLiA 高频生理信号回归、多变量天气预测及 PhysioNet Sepsis 不规则采样临床预测四类基准上,LogSig-SSM 优于或匹配较强的 SSM 与连续时间基线;在最长序列上,相比 Mamba,训练速度最高提升至 30 倍,GPU 显存用量最高减少 37 倍。摘要未明确这些效率极值分别对应哪个基准、硬件与配置,也未提供各任务指标、数据划分或不确定性;实验协议、消融及统计信息尚未验证,不能据此认定所有任务均有同等收益。 平台推测(待验证):迁移假设是,EEG 长序列中的跨通道交互可由窗口化 log-signature 保留,并在压缩后供 SSM 利用。可复用压缩与序列建模思路,但需适配 EEG 通道排列、时间编码及窗口尺度;低信噪比可能使高阶交互放大噪声,通道变化和跨被试差异可能削弱表征稳定性,小数据也可能限制学习。一个可证伪的小实验是在固定 Cross-subject 划分、预处理与训练预算下,对比原始 EEG 输入的 Mamba 与 LogSig-SSM,同时记录分类指标、训练耗时和峰值显存,并改变窗口尺度检验是否牺牲任务信息。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对多尺度 log-signature 压缩能否在保留跨通道交互的同时降低长序列建模成本;摘要中的效率优势有明确比较对象,但具体协议及向 EEG 的迁移效果尚未验证。

  3. arXiv · 时序与音频基础模型73

    GRAM:通过图检索幅度记忆校正冻结的时序基础模型

    基于摘要分析。GRAM 针对冻结时序基础模型(TSFM)的预测校正问题,提出检索增强框架:不直接复用相似历史窗口的真实未来值,而是从历史预测误差中提取可重复的系统性偏差,用于修正当前预测。 核心机制:作者认为,历史真实未来值既包含基础模型已经捕获的可预测成分,也包含难以迁移的样本特异性随机波动;相比之下,重复出现的模型偏差更直接反映冻结模型的失效模式。Amplitude Memory Module(AMM)按幅度缩放预测误差,并将其聚合为可检索原型,以处理不同数值尺度下误差难以比较的问题。Prototype Graph Module(PGM)建模原型间关系,聚合一致的偏差信息并抑制随机波动。在线预测时,GRAM 检索并扩展与当前查询相关的原型,为各预测步生成校正量,细化原始 TSFM 输出。摘要未给出幅度定义、原型构建规则、图连接方式或校正器训练细节。 结果与核对事项:作者报告,在多个数据集和基础模型上获得一致的预测改进,但摘要未提供数据集名称、指标、数值、划分或对照配置,不能据此判断收益大小与统计稳定性。实验协议、消融及统计信息尚未验证;复现时需核对历史误差记忆的构建时间范围、在线可用信息、记忆更新机制,以及 AMM 与 PGM 的独立贡献。 平台推测(待验证):若 EEG 连续信号预测存在可重复的模型偏差,该机制可能用于冻结预测模型的残差校正,但不等同于已验证的 BCI 解码收益。其依赖具有真实后续观测的历史窗口和相对稳定的误差结构;可复用误差原型与图聚合思路,需改造多通道幅度处理及被试、会话间检索策略。低信噪比、通道差异和小数据可能使原型主要反映噪声或个体差异。可在严格按时间划分的单一 EEG 连续预测任务中,对比冻结模型、直接残差检索和 GRAM 式校正,检验图聚合是否带来稳定收益。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对 GRAM 将检索对象从历史真实未来值转向模型误差原型的设计,尤其是幅度归一化与图聚合能否稳定提取冻结模型的系统性偏差;具体收益及适用边界尚未验证。

  4. arXiv · 表征与预训练75

    KALEIDO:通过门控折叠几何实现视觉模型用于时间序列预测的输入空间适配

    基于摘要分析。KALEIDO 研究如何将 ImageNet 预训练的 masked autoencoder 用于时间序列预测,核心贡献是将序列渲染的折叠几何作为可控制、可混合的适配维度,以缩小时间序列图像与自然图像之间的差异。 方法先检测主导周期,按规则生成一组折叠几何,将序列渲染成图像并通过图像补全获得预测;随后使用仅在验证集上拟合的逐位置凸组合门控融合各几何的补全结果,再以一个固定融合比例与零样本基线输出结合。作者称,除基线已公布的设置外,不引入逐数据集超参数。这里的验证集门控拟合应与基线的零样本属性区分,完整的数据划分、验证信息使用方式及推理流程尚未验证。 作者报告,在 LTSF 上,仅训练 LayerNorm、所训练参数占比为 0.05% 时,相对已公布的零样本基线,MSE 降低 13%;冻结模型时,MSE 降低 6.6%。在 GIFT-Eval 上,作者报告相对基线的 MASE 改善 7.4%、CRPS 改善 19.3%,但摘要未明确这两项结果对应冻结模型还是 LayerNorm 适配。具体预测长度、任务聚合方式、门控拟合规模、消融及统计信息尚未验证,不宜跨协议直接比较这些结果。 平台推测(待验证):该机制可能用于具有周期结构的 EEG 时间序列预测,但不能据此推断 BCI 解码收益。可复用部分是周期检测、多几何渲染和门控融合;需改造的是多通道组织、幅值归一化及预测任务接口。低信噪比、非平稳周期、跨被试差异及小验证集可能使周期估计或门控不稳定。可检验的小实验是在同一 EEG 预测任务与严格分离的数据划分下,对比单一几何、多几何均匀融合及验证集门控,检查收益是否在跨会话测试中保持。已有相关 EEG 工作尚未检索确认。

    阅读价值:值得核对其周期感知折叠几何与验证集门控如何改善视觉模型的时序预测,尤其是冻结模型的收益及验证集适配与零样本评估的协议边界。

10月3日周六
  1. arXiv · 学习目标与优化71

    学习记忆:面向紧凑循环神经网络的记忆保持蒸馏

    基于摘要分析。该研究针对时间序列循环神经网络在资源受限设备上的部署问题,提出 Memory-Discrepancy Knowledge Distillation(MemKD),通过蒸馏教师与学生在子序列上的记忆保持行为,训练更紧凑的学生模型。 核心机制:作者认为,源自计算机视觉任务的常规 Knowledge Distillation(KD)方法不足以刻画时间序列特有的时间依赖与记忆保持特征。MemKD 使用专门的损失函数捕捉教师与学生跨子序列的记忆保持差异,以促使学生模仿教师行为。摘要未给出“记忆保持”的数学定义、子序列构造方式、损失形式及其与其他训练目标的组合,因此尚不能判断该目标具体约束哪些模型状态或输出。 结果与证据:作者报告,在扩展的时间序列基准实验中,MemKD 优于所比较的先进 KD 方法,并可在多种压缩程度下匹配教师性能,同时减少参数量与内存使用,而准确率无显著损失。摘要未提供基准名称、划分协议、基线配置、压缩比例、指标数值或统计依据;这些结论的适用范围尚未验证。作者还称提供了额外实验与深入理论分析,具体内容需全文核对。参数与内存减少也不能直接等同于真实设备上的延迟或能耗降低。 平台推测(待验证):迁移假设是,若 EEG 任务依赖跨时间窗的动态信息,记忆保持蒸馏可能有助于压缩用于可穿戴 BCI 的循环模型。可复用部分是教师—学生蒸馏框架;需适配 EEG 的时间尺度、采样率、通道组织及任务监督。低信噪比可能使学生复制教师的噪声响应,跨被试差异与通道变化可能削弱记忆对齐,小数据也可能使教师行为不稳定。一个可证伪的小实验是在固定 EEG 数据划分、相同教师和学生架构及训练预算下,对比普通 KD 与 MemKD,检验任务指标与实际推理内存,并核对收益是否依赖子序列长度。该实验只是迁移建议,不是论文已有结果;相关 EEG 工作尚未检索确认。实验协议、消融及统计信息尚未验证。

    阅读价值:MemKD 将时间序列子序列上的记忆保持差异作为蒸馏目标,值得核对其是否比常规 KD 更有效地保留小型循环神经网络的时序能力,但具体收益与 EEG 适用性尚未验证。

  2. arXiv · 时序与音频基础模型73

    QiYao-I:用于不规则多变量时间序列预测的基于流形的基础模型

    基于摘要分析。QiYao-I 面向不规则采样、变量间异步记录的多变量时间序列预测,试图解决主要建立在规则采样序列上的时序基础模型难以处理不规则时间间隔与异步变量依赖的问题。其核心贡献是采样条件化的时间流形注意力,以及具有频率感知能力的动态变量交互机制。 机制方面,前者将真实时间戳映射到可学习的时间流形特征空间,并向注意力层注入时间流形偏置,以表征不规则时间间隔和局部采样结构;后者在异步观测条件下选择性地进行跨变量消息传递。摘要未说明流形的具体定义、频率感知的实现、消息传递的选择规则或训练目标,这些细节尚未验证。 作者报告,在真实世界的不规则多变量预测基准上,QiYao-I 相比时序基础模型和端到端不规则预测模型取得更优表现,并在零样本、少样本设置下展现较强泛化能力。摘要未提供数据集名称、划分方式、指标、具体数值及基线配置,因此无法判断优势幅度或比较条件;预训练数据规模、实验协议、消融及统计信息尚未验证,模型权重与研究实现的可用性也尚未验证。 平台推测(待验证):若 EEG 或多模态神经记录存在缺测、不同采样率或异步时间戳,这两类机制可能用于保留真实时间结构、减少强制重采样造成的信息损失;但这是假设,不构成已验证的 BCI 效果。可考虑复用时间戳编码与异步消息传递,需改造通道表示、采样条件及任务输出。低信噪比、跨被试差异和小数据可能使采样结构成为伪相关,而同步、规则采样 EEG 未必受益。一个可证伪的小实验是在固定被试划分的 EEG 预测任务中引入可控缺测和时间抖动,对比保留真实时间戳与规则重采样的方案,并检验优势是否随不规则程度变化。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读其如何将真实时间戳与采样结构纳入注意力、并在异步观测下建模变量交互;作者报告的零样本与少样本优势仍需结合全文中的数据划分、基线及统计信息核对。

  3. arXiv · 时序与音频基础模型75

    SEER:面向时间序列预测的自演进事件推理与检索

    基于摘要分析。该研究针对外生事件与结构变化驱动的时间序列预测,提出 SEER(Self-Evolving Event Reasoning and Retrieval)闭环框架,通过预测误差持续优化外部事件条件信息,试图弥补仅依赖历史数值观测及常规检索增强方法的不足。 核心机制是将预测误差转化为两种解耦反馈:一是反思式检索记忆,用于改进后续搜索查询并过滤无关噪声;二是持久化因果知识库,用于提炼可迁移的领域动态规律。摘要将高噪声、信号缺失及事件影响的因果推理能力不足列为常规检索增强方法的难点,但尚未给出 SEER 的具体知识表示、更新规则、训练目标或预测器接口。因果知识库的命名也不等同于已完成因果识别验证。 作者报告,在六个高波动时间序列基准上,SEER 持续优于所比较的先进时间序列基础模型及语言模型基线。摘要未提供基准名称、划分、预测跨度、指标、数值或基线配置,因此尚不能判断优势幅度及不同协议下的适用范围。作者称事件检索与反思均遵守严格时间边界,以防止前视偏差和数据泄漏;具体实施方式、实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 预测任务具有带可靠时间戳的外部事件或上下文记录,可假设检索记忆与领域知识积累有助于应对状态变化;这不构成已验证的 EEG/BCI 效果。可复用的是反馈分离思路,需改造事件表示、检索源及反馈更新时机。低信噪比、被试差异、通道变化和小数据可能使误差反馈误归因并积累错误知识。一个可检验的小实验是在固定 EEG 预测任务与按时间划分的协议下,对比数值预测器、静态事件检索与闭环反馈,并分别关闭两类反馈,检查收益是否稳定。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对的是 SEER 如何将预测误差分别用于检索记忆更新与因果知识积累,以及检索和反思的时间边界如何落实;其性能优势目前仅有摘要中的作者报告。

  4. arXiv · 表征与预训练80

    RNADyn:用于生成与理解 RNA 动力学的基准

    基于摘要分析。该研究针对静态结构难以完整描述 RNA 构象变化、标准化动力学数据有限,以及轨迹生成与动力学理解通常分离的问题,提出 RNA 分子动力学(MD)基准 RNADynBench,并构建统一模型 RNADynNet,将全原子轨迹生成与动力学表征学习连接起来。 数据与机制:作者提供了 2585 条经过质量控制、每条时长为 100 ns 的全原子 MD 轨迹,并采用防泄漏数据划分。RNADynNet 使用共享骨干,从单个构象同时支持轨迹生成与动力学指纹提取;其机制结合坐标去噪、单帧到轨迹对齐及物理约束(physical grounding)。具体网络结构、损失形式、物理约束定义与数据划分依据尚未验证。 结果:作者报告,在两个测试集上(其中包含高柔性挑战集),生成轨迹的 RMSF 相关性分别为 0.875 和 0.766;摘要未明确两个数值与各测试集的对应关系。作者还报告,单构象预测与 MD 推导的动力学具有相近的一致性,物理约束能够改善生成动力学及指纹中可恢复的物理信息。上述相关性不等同于完整轨迹精度,仍需结合正文核对指标计算、对照基线、消融与统计不确定性。 适用边界:该工作直接面向 RNA 分子动力学,而非 EEG 或 BCI。其建模依赖原子坐标与分子物理结构,不能据此推定对神经信号有效。平台推测(待验证):生成与动力学表征共享骨干的思路可供时序建模参考,但 EEG 并不具有相同的坐标监督与物理约束条件,因此暂不提出直接迁移结论。相关 EEG 工作尚未检索确认;数据获取方式、实现开放情况、实验协议、消融及统计信息尚未验证。

    阅读价值:值得阅读之处在于将标准化 RNA 动力学基准与生成、表征共享骨干的模型结合,可重点核对物理约束如何改善轨迹与动力学指纹,以及防泄漏划分的具体实现。

10月2日周五
  1. arXiv · 表征与预训练80

    利用非平稳性学习具有瞬时与滞后关系的因果表征

    基于摘要分析。研究针对时间序列中潜在状态及其因果关系的识别问题,同时考虑跨观测间隔的滞后关系与间隔内较快作用表现出的瞬时关系。作者提出相应的可识别性充分条件,并据此构建 iCReN,通过非平稳信息与对比学习学习潜在表征、估计两类因果结构。 核心机制是利用与转移噪声分布变化相关的可观测辅助变量,例如时间或条件标签。作者给出的理论识别范围为:潜在状态可识别至分量置换及逐分量可逆变换,瞬时与滞后因果结构可识别至同一分量置换。iCReN 支持离散或连续辅助变量;但充分条件的具体假设、对比目标、结构估计步骤及训练与推理流程尚未验证。这里的“瞬时”关系指观测间隔内较快作用的表征,不应直接理解为物理上零延迟的作用。 作者报告,在合成数据实验中能够准确恢复潜在状态及瞬时、滞后因果结构,并在真实数据的下游预测任务中展示所学表征的用途。摘要未提供数据集、样本规模、划分、对照方法或指标数值,实验协议、消融及统计信息尚未验证,因而不能据此量化优势或判断其在具体 BCI 任务中的效果。 平台推测(待验证):假设 EEG 中存在与时间或实验条件相关、且满足理论要求的潜在转移噪声变化,该机制可能为非平稳 EEG 的潜在动力学建模提供参考。可考虑复用辅助变量驱动的对比表征学习与时序结构估计思路,但需适配 EEG 的观测混合、采样间隔和通道结构;跨被试差异、低信噪比及小数据可能妨碍识别,条件标签也不必然满足理论假设。一个可证伪的小实验是在具有已知潜在因果结构、可控噪声分布变化及 EEG 式观测混合的合成数据上,对照保留与打乱辅助变量的恢复结果,并逐步降低信噪比、减少通道,检验其适用边界。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的具体原因是其将非平稳性作为识别潜在状态及瞬时、滞后因果结构的信息来源,并提出对应的 iCReN 学习框架;理论条件与 EEG 数据的适配性尚未验证。