跳到正文

研究类型与证据

潜在迁移 最新动态

潜在迁移 研究索引;按可核对的标签归档,不以热度评价质量。

153 条精选近 30 天 74 条共收录 186 条

更新

精选归档 · 第 7 页

9月18日周三第 121–140 条
  1. OpenReview · State space models78

    状态空间模型的参数高效微调

    基于摘要分析。本文研究 Mamba 等深度状态空间模型(SSMs)的参数高效微调(PEFT),重点比较现有方法的适用性及微调模块的选择,并提出 LoRA with Selective Dimension tuning(SDLoRA),将线性投影矩阵上的 LoRA 与 SSM 模块中部分通道和状态的选择性更新结合。 作者报告,在 SSM 模型上对四种基本 PEFT 方法进行经验评估后,prompt-based 方法(如 prefix-tuning)效果不佳,理论分析也支持这一观察;相比之下,LoRA 仍然有效。针对 LoRA 的应用位置,作者报告,理论与实验均支持仅将 LoRA 应用于线性投影矩阵、而不修改 SSM 模块的配置效果最好,直接以 LoRA 微调 SSM 模块则效果不佳。SDLoRA 并非在 SSM 模块中简单增加 LoRA,而是对其中部分通道和状态进行选择性更新,同时保留投影矩阵上的 LoRA。作者报告,该组合优于标准 LoRA,但摘要未提供具体任务、数据集、指标或增益幅度。 需核对的关键细节包括:四种 PEFT 方法的完整设置、通道与状态的选择规则、可训练参数预算及其匹配方式,以及理论结论的适用条件。实验协议、消融及统计信息尚未验证,不能据此判断其在不同模型规模或任务上的普适性。 平台推测(待验证):若已有预训练 EEG SSM 编码器,该机制可能用于缓解跨被试适配中训练样本有限、全量微调成本较高的问题。可复用的是投影矩阵 LoRA 和 SSM 维度选择性更新的思路;需改造的是 EEG 输入映射、任务输出头及维度选择策略。其原始论证背景为语言建模中的 SSM,摘要未说明依赖的预训练规模或下游监督条件;低信噪比、通道配置变化和个体差异可能使所选维度不稳定。一个可证伪的小实验是在固定预训练编码器和 Cross-subject 划分下,以匹配的可训练参数预算比较投影矩阵 LoRA 与 SDLoRA,并检查多次运行的稳定性。已有 EEG 相关工作尚未检索确认。

    阅读价值:该研究通过经验比较与理论分析区分 SSM 模块和线性投影矩阵的微调适用性,为复现 Mamba 类模型的 PEFT 提供了具体切入点,但实验协议与性能增益尚待全文核对。

8月20日周二
  1. OpenReview · State space models80

    谱状态空间模型

    基于摘要分析。本文研究具有长程依赖的序列预测,提出基于 spectral filtering algorithm(Hazan et al. 2017)学习线性动力系统的状态空间模型(SSM)新表述,并据此构建 spectral state space model。 核心机制是使用固定、无需学习的卷积滤波器进行序列建模;这不意味着模型全部参数均固定。作者报告,该方法具有可证明的鲁棒性,其性能不依赖底层动力系统的谱或问题维度,并在理论与实践中优于所比较的 SSM。上述保证的具体定义、假设、误差界及比较对象尚未验证,不能据摘要解读为对任意数据均无条件成立。 作者报告,在合成动力系统及不同模态的长程预测任务上的评估支持谱滤波处理极长记忆需求的优势。摘要未提供具体数据集、数据划分、指标、结果数值或基线配置;实验协议、消融及统计信息尚未验证,实现与复现条件也需查阅全文。 平台推测(待验证):假设 EEG 任务确实依赖较长时间跨度的信息,固定时间卷积滤波器可能作为长程时序模块复用。原方法围绕线性动力系统与序列预测展开,对 EEG 的迁移需明确输入采样结构、预测监督及训练规模,并改造多通道输入与任务输出;固定滤波器不等于 EEG 频带滤波。低信噪比、跨被试非平稳性、通道差异与小数据可能削弱其收益。可检验的小实验是在预先固定的跨被试划分下,将该模块与一个 SSM 基线用于同一 EEG 预测任务,保持输入窗口和训练预算一致,比较不同窗口长度下的预测误差,以检验更长上下文是否带来稳定收益。该方案仅为迁移假设,已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对谱滤波如何在固定卷积滤波器下提供长程记忆及鲁棒性保证,但其理论适用条件与 EEG 迁移效果尚未验证。

7月21日周日
  1. OpenReview · State space models73

    DGMamba:通过广义状态空间模型实现域泛化

    基于摘要分析。DGMamba 针对视觉域泛化中的分布偏移问题,试图在保留 Mamba 全局感受野与线性复杂度优势的同时,通过隐藏状态抑制及语义感知图像块处理,提高对未见域的泛化能力。 核心机制包括 Hidden State Suppressing(HSS)与 Semantic-aware Patch Refining(SPR)。HSS 旨在减弱与域特有特征关联的隐藏状态对输出预测的影响。SPR 则鼓励模型关注对象而非背景,包含 Prior-Free Scanning(PFS)和 Domain Context Interchange(DCI):PFS 打乱图像中的非语义 patches,以调整图像序列的组织方式;DCI 跨域融合 patches,通过组合不匹配的非语义与语义信息对 Mamba 进行正则化。摘要未说明语义区域如何识别、隐藏状态如何抑制,以及具体损失和训练流程,这些实现细节尚未验证。 作者报告,在四个常用 DG benchmark 上,DGMamba 优于现有先进模型;但摘要未提供 benchmark 名称、数据划分、指标数值或对照配置,不能据此量化收益或判断比较条件。实验协议、消融及统计信息尚未验证。作者表示代码将公开,当前材料不能确认代码已发布。 平台推测(待验证):可检验的迁移假设是,HSS 或可用于削弱 EEG 中与被试或会话相关、但与任务无关的状态信息。原方法依赖图像 patches 的语义与背景区分及跨域重组,迁移时需重新定义 EEG 时段或通道片段的任务相关性,并核对是否依赖额外监督或较大数据规模;不能直接套用对象与背景划分。低信噪比、小数据及通道差异可能导致任务信号被误抑制,片段打乱也可能破坏时序结构。一个小规模可证伪实验是:在相同 Cross-subject 划分与训练预算下比较 Mamba 基线和仅加入 HSS 的版本,保持测试被试不可见,检验泛化收益是否稳定。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对其对域相关隐藏状态的抑制与语义、背景重组机制能否真正改善未见域泛化,但摘要尚不足以验证性能优势或 EEG 迁移价值。

6月21日周五
  1. OpenReview · Representation learning72

    迈向高效的大规模语言-3D 表征学习

    基于摘要分析。该研究探索如何高效学习大规模 3D 对象与语言之间的跨模态表征,提出 MaskCL3D,结合 3D 点云、语言描述和多视角图像上的对比学习与掩码重建,并构建覆盖多类对象及描述的语言-3D 数据集。 机制上,对比学习用于跨模态表征学习,掩码重建提供补充学习信号;但摘要未说明具体对齐对象、掩码施加位置、重建目标、损失组合及推理流程,不能据此确定效率提升来自何种设计。其贡献同时涉及训练方法和数据资源,阅读全文时需核对两者的独立作用,以及训练与测试效率的衡量方式。 作者报告,在其评估的零样本分类和检索任务中,使用新数据集训练的模型优于使用其他数据集训练的模型,MaskCL3D 与新数据集的组合相较现有基线达到最先进性能;作者还报告,表征分析显示语言和 3D 表征包含丰富语义信息。摘要未提供数据集名称、规模、划分、基线、具体指标或数值,因此这些结论目前只能保留为作者的定性报告,实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 与文本描述或刺激图像存在可靠配对,可假设跨模态对比学习与掩码重建的组合有助于学习语义相关表征,但 3D 对象上的结果不等于 EEG/BCI 效果。可复用的是学习目标的组合思路,需改造点云编码与重建模块以适应 EEG 时序和通道结构;低信噪比、跨被试差异及小规模配对数据可能导致模型学习刺激或被试特征,而非目标语义。一个可检验的小实验是在固定跨被试划分和相同数据预算下,比较仅对比学习与加入 EEG 掩码重建的模型,检查跨模态检索表现是否稳定改善。相关 EEG 工作尚未检索确认;代码、数据可用性及完整复现条件也尚未验证。

    阅读价值:值得核对 MaskCL3D 如何联合对比学习与掩码重建,以及方法改进和新数据集分别对零样本分类、检索及计算效率的贡献;摘要尚不足以分离这些因素。

6月18日周二
  1. OpenReview · State space models78

    谱状态空间模型

    基于摘要分析。该研究面向具有长程依赖的序列预测任务,提出基于 spectral filtering 算法学习线性动力系统的状态空间模型(SSMs)新表述,并由此构建 spectral state space model。其核心特点是采用无需学习的固定卷积滤波器,将谱滤波机制用于长记忆序列建模。 理论与实验:作者报告,该模型对需要长记忆的任务具有可证明的鲁棒性性质,并在合成动力系统及不同模态的长程预测任务上进行评估;作者认为这些评估支持 spectral filtering 在超长记忆任务中的理论优势。摘要未给出鲁棒性的具体定义、假设条件、滤波器构造、训练目标或推理流程,也未列出数据集、划分、对照基线和定量指标,实验协议、消融及统计信息尚未验证。阅读全文时应重点核对理论保证覆盖的动力系统范围,以及固定滤波器相对可学习机制的收益与限制。 平台推测(待验证):迁移假设是,固定谱滤波器可能为 EEG 中长程时间依赖的提取提供可复用的时间建模模块,但原领域有效不等于 BCI 有效。其原始机制依赖序列数据及线性动力系统学习表述,所需监督形式与数据规模尚未验证;用于 EEG 时仍需适配多通道输入、任务输出及跨被试差异。低信噪比、非平稳性、通道配置变化和小数据可能削弱固定滤波器的适配能力。一个可证伪的小实验是在同一 EEG 任务、相同预处理与固定划分下,对比固定谱滤波模块与可学习时间滤波模块,分别记录被试内、跨被试结果,并检查延长输入窗口是否稳定带来收益。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对固定卷积滤波器与长记忆鲁棒性之间的理论联系及其适用条件,但摘要尚不足以判断其对 EEG 长程建模的实际收益。

5月28日周二
  1. OpenReview · Representation learning75

    以多样性实现统一:改进多模态 VAEs 的表征学习

    基于摘要分析。该研究针对多模态 VAEs 中共享表征的硬约束可能限制模态信息保留的问题,提出 mixture-of-experts prior,以软约束引导各模态的潜在表征靠近共享的 aggregate posterior。核心贡献是用较柔性的跨模态对齐替代编码器输出、解码器输入或二者的强制共享。 机制上,作者认为现有共享结构对模型施加了硬约束,而所提先验可在形成共同表征的同时,更好地保留各模态原始特征中的信息。摘要未给出先验的具体参数化、aggregate posterior 的构造方式、损失形式及训练与推理流程,不能据此判断其实现复杂度或与既有方法的结构差异。 作者报告,在多个基准数据集及一个具有挑战性的真实神经科学数据集上,相比现有方法,所学潜在表征和缺失模态补全均有改善。摘要未提供数据集名称、神经信号类型、被试数、划分协议、对照方法或具体指标;实验协议、消融及统计信息尚未验证,也无法判断表征改善对应何种下游任务。 平台推测(待验证):假设用于 EEG 与其他同步模态的联合建模,软共享机制可能缓解不同模态信息被强制压入共同表征的瓶颈。其依赖模态间存在可学习的共享结构,配对数据与监督条件仍需核对;可考虑复用先验与软对齐思想,但需改造 EEG 编解码模块及缺失模态处理流程。低信噪比、跨被试差异、通道变化和小数据条件可能使共享表征受较强模态主导。一个可检验的小实验是在同一配对数据与固定跨被试划分下,对比硬共享和软约束模型,并在预先规定的模态缺失条件下评估补全及下游任务表现。以上不是已验证的 EEG/BCI 结果,已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对其 mixture-of-experts prior 如何在跨模态共享与模态特有信息保留之间实现软约束,以及缺失模态补全的收益是否在不同缺失条件下稳定;摘要中的神经科学实验尚不足以确认 EEG/BCI 适用性。

1月1日周一
  1. OpenReview · State space models75

    Coupled Mamba:通过耦合状态空间模型增强多模态融合

    基于摘要分析。该研究针对多模态融合中复杂的模态内与模态间关联,提出 Coupled SSM,并构建 Coupled Mamba,在保留模态内状态演化过程独立性的同时耦合不同模态的状态链,试图兼顾跨模态交互建模与硬件感知并行计算。 核心机制是跨模态隐状态转移:当前状态依赖本模态状态链及相邻状态链在前一时间步的状态。为适配硬件感知并行设计,作者通过引入历史状态、推导状态方程得到全局卷积核。其可核对的机制特点是将模态交互引入状态演化过程;具体耦合拓扑、参数化方式、训练目标及并行实现细节尚未验证。 作者报告,在 CMU-MOSEI、CH-SIMS、CH-SIMSV2 的多域输入实验中,相较摘要所称的当前先进方法,三个数据集的 F1-Score 分别提高 0.4%、0.9% 和 2.3%;摘要未明确这些百分比表示相对增幅还是百分点差值,因此不能转换解读。作者还报告推理速度提升 49%、GPU 显存节省 83.7%,但对应基线、硬件、输入规模及测量条件尚未验证。数据划分、实验协议、消融及统计信息均需结合全文核对。 平台推测(待验证):该机制可能适用于具有时间对应关系的 EEG 与其他模态序列融合,但原任务结果不等于 BCI 有效。可复用的是跨模态状态耦合思路;需改造输入编码、采样率对齐和缺失模态处理。EEG 低信噪比、跨被试差异及小数据条件可能使耦合传播噪声或增加过拟合风险。一个可检验的小实验是在同一同步多模态数据集与相同跨被试划分下,对比独立状态链、简单后期融合与耦合状态链,并检验单模态受噪声污染时的性能变化。相关 EEG 工作尚未检索确认。

    阅读价值:值得核对其跨模态状态耦合与硬件并行实现:摘要给出了具体的状态交互机制及效果、效率结果,但比较基线与评估协议仍需全文验证。

  2. OpenReview · State space models71

    TrackSSM:基于状态空间模型的通用运动预测器

    基于摘要分析。TrackSSM 针对多目标跟踪(MOT)中运动模型难以兼顾效率与跨场景有效性的问题,提出基于数据依赖状态空间模型(SSM)的统一编码器—解码器框架,利用历史轨迹预测目标边界框的时间位置,为轨迹关联提供位置信息。 核心模块 Flow-SSM 以历史轨迹的位置及运动信息引导边界框的时间状态转移。运动编码器使用 Mamba-Block 编码历史轨迹,flow decoder 则通过级联的 Flow-SSM 运动解码模块,利用编码后的 flow 信息完成位置预测。训练采用 Step-by-Step Linear(S²L)策略:在目标前一帧与当前帧的位置之间进行线性插值,构造逐步线性训练的伪标签,以引导边界框的时间转移。这里的 flow 是轨迹运动信息,摘要不足以将其等同于图像光流。 作者报告 TrackSSM 适用于多种跟踪场景,并在多个基准上取得良好跟踪表现,但摘要未列出基准名称、数据划分、对照方法、具体指标或计算成本,因此无法核对性能提升幅度及效率收益。摘要声明代码和模型已公开;实现细节、实验协议、消融及统计信息尚未验证,也不能据此推断论文接收或发表状态。 平台推测(待验证):假设以历史信息调节状态转移的机制能够适应 EEG 的时变动态,可将其作为 EEG 时序预测的候选模块。原方法依赖可定位的目标轨迹及相邻帧位置监督;EEG 没有直接对应的边界框,需要改造输入表示、预测输出和监督目标,而 Mamba 编码器与条件化状态转移思路可能复用。低信噪比、通道差异、跨被试非平稳性及小数据训练都可能使运动建模收益无法迁移;线性插值还可能平滑掉真实的快速变化。一个可证伪的小实验是在固定 EEG 数据划分和相同训练预算下,比较 Mamba 基线与加入历史信息引导状态转移的模型在短时序预测中的误差,再单独核对插值监督是否带来收益。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读其以历史位置和运动信息引导数据依赖状态转移、并用插值伪标签训练运动解码器的机制;摘要未给出定量结果,其优势及向 EEG 时序建模迁移的可行性尚未验证。

  3. OpenReview · State space models75

    槽状态空间模型

    基于摘要分析。该研究针对常规状态空间模型(SSM)以整体状态向量建模、难以显式表达模块化过程的问题,提出 SlotSSMs:将状态表示为多个称为 slots 的向量,通过各槽独立的状态转移及受限的跨槽交互,在长程时序建模中保留或鼓励信息分离。 核心机制是把状态演化拆分到独立槽内,并通过 self-attention 瓶颈实现稀疏的槽间交互。相较于整体状态表示,这一设计引入了独立机制的归纳偏置,适合检验多个对象各自演化、同时存在相互作用的序列建模问题。摘要未说明槽的初始化与分配方式、具体 SSM 实现、损失函数及训练和推理配置,相关细节尚未验证。 作者报告,在 object-centric learning、3D visual reasoning 和 long-context video understanding 任务中,SlotSSMs 相较现有序列建模方法取得显著性能提升;这些任务涉及多个对象及其长程时间依赖。摘要未提供数据集、划分、具体对照方法或指标数值,不能据此量化收益或比较不同评估协议;实验协议、消融及统计信息尚未验证。 平台推测(待验证):迁移假设是,若 EEG 中存在可分离且相互耦合的动态成分,独立槽状态及跨槽交互可能用于建模这些成分,而非直接把槽等同于电极或脑源。可复用模块是槽内时序更新与槽间交互;需改造 EEG 输入编码和槽分配机制。视觉任务中的对象结构不一定对应 EEG 的混合观测,低信噪比、跨被试与通道差异、小数据条件可能导致槽混叠或不稳定。可在固定 Cross-subject 划分下,以匹配参数量的整体状态 SSM 为对照,比较任务指标并检查槽表示稳定性,检验模块化偏置是否带来收益。已有 EEG 相关工作尚未检索确认。

    阅读价值:SlotSSMs 将独立槽状态转移与受限跨槽交互结合,为模块化长程序列建模提供了可核对的机制设计;其能否改善 EEG 中多源动态的分离与建模尚未验证。

  4. OpenReview · State space models70

    PhysMamba:用于远程生理测量的状态空间对偶模型

    基于摘要分析。该研究针对从面部视频提取生理信号的 Remote Photoplethysmography(rPPG)在真实环境中易受运动伪影和噪声影响的问题,提出 PhysMamba,利用 State Space Duality 构建时频交互双路径模型,以学习更具代表性的特征。 机制方面,作者设计 Cross-Attention State Space Duality(CASSD),促进两条路径之间的信息交换与特征互补。摘要将时频交互及跨路径融合与噪声条件下的鲁棒性提升联系起来,但具体时频表示、状态空间实现、交互位置、损失函数及训练流程尚未验证。 作者报告在 PURE、UBFC-rPPG 和 MMPD 数据集上开展比较实验,并达到 SOTA,尤其在复杂环境下表现突出。摘要未提供具体指标、数值、数据划分及对照方法,因此目前无法判断优势幅度,也不能确定这些结果属于数据集内评估还是 Cross-dataset 评估。实验协议、消融及统计信息尚未验证;复现还需核对视频预处理、信号标签、评估流程及实现可用性。 平台推测(待验证):若 CASSD 的时频互补机制不依赖面部视频的特定空间结构,可探索其对 EEG 非平稳信号和伪影干扰的适用性。可复用候选是双路径信息交互模块,需改造视频输入与特征编码;原方法对监督信号、数据规模和时频表示的依赖尚不明确。EEG 的低信噪比、跨被试差异、通道变化及小数据条件可能使交互模块放大伪影或过拟合。一个可检验的小实验是在固定 Cross-subject EEG 划分、相同预处理与训练预算下,对比单路径、双路径无交互及 CASSD 交互模型,并检查受控噪声扰动下的性能变化。该迁移假设不构成已验证的 EEG/BCI 效果,已有 EEG 相关工作尚未检索确认。

    阅读价值:值得关注其通过 CASSD 实现时频双路径信息交互的机制,但复杂环境下的鲁棒性优势仍需结合完整实验协议、指标与消融核对。

  5. OpenReview · State space models72

    DGMamba:通过广义状态空间模型实现域泛化

    基于摘要分析。DGMamba 研究视觉域泛化中的分布偏移问题,尝试在保留 Mamba 全局感受野与线性复杂度优势的同时,通过抑制域特异隐藏状态、调整图像 patch 扫描和组合方式,提高对未见域的泛化能力。 核心机制包括 Hidden State Suppressing(HSS)与 Semantic-aware Patch Refining(SPR)。HSS 用于减轻与域特异特征相关的隐藏状态对输出预测的影响。SPR 旨在让模型更多关注对象而非上下文,包含 Prior-Free Scanning(PFS)和 Domain Context Interchange(DCI):PFS 打乱图像中的非语义 patch,构造更灵活的序列;DCI 通过跨域融合 patch,将不匹配的非语义与语义信息组合起来,对 Mamba 施加正则化。摘要未提供隐藏状态识别与抑制的具体实现、语义 patch 判定方法或损失形式。 作者报告,在四个常用 DG benchmark 上,DGMamba 获得优于所比较先进模型的结果;摘要未列出 benchmark 名称、指标数值、训练与测试域划分及具体基线,因此尚不能判断收益幅度及各模块贡献。实验协议、消融及统计信息尚未验证。摘要表示代码将公开,并非已确认发布。 平台推测(待验证):假设 EEG 中也能区分任务相关信息与被试或会话特异背景,HSS 的抑制思路可能对应跨被试、跨会话分布偏移;但图像对象与背景的划分不能直接等同于 EEG 的时间段或通道。可考虑复用隐藏状态抑制与背景重组思路,需改造 patch 定义、任务相关性判定及扫描顺序,避免破坏时序和通道关系。低信噪比、小数据及被试间差异可能使判定不稳定,误抑制有效信号。一个可证伪的小实验是在固定跨被试划分下,对比基础 Mamba 与仅加入 HSS 的版本,保持训练数据和调参预算一致,检查未见被试表现是否改善;这一迁移假设尚无本文证据支持,已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的具体原因是 DGMamba 将域泛化中的域特异特征抑制与图像扫描机制改造分别落实为 HSS 和 SPR,可据此核对状态空间模型的泛化收益来源,但其 EEG 迁移价值尚未验证。

  6. OpenReview · State space models76

    槽状态空间模型(Slot State Space Models)

    基于摘要分析。该研究针对传统 State Space Models(SSMs)以单一整体状态向量表示序列、难以体现底层过程模块化结构的问题,提出 SlotSSMs:将状态组织为多个称为 slots 的向量,通过独立状态转移与受限交互,保留或鼓励不同机制之间的信息分离。 核心机制是各 slot 独立执行状态转移,并通过 self-attention 瓶颈实现 slots 之间的稀疏交互。与摘要所述的传统整体式状态表示相比,其主要区别是显式引入模块化归纳偏置,同时允许模块交换信息。摘要未说明 slots 的构造方式、交互稀疏性的具体实现、训练目标及计算复杂度,不能据此推定其采用特定 SSM 骨干或获得特定效率收益。 作者报告,在 object-centric learning、3D visual reasoning 和 long-context video understanding 任务中,SlotSSMs 相较现有序列建模方法取得明显性能提升;这些任务涉及多个对象及其长程时间依赖。摘要未给出数据集、划分、指标数值或具体对照方法,实验协议、消融及统计信息尚未验证。复现前需核对完整模型定义、训练配置,以及项目页是否提供可用实现与实验资源。 平台推测(待验证):其可迁移假设是,将 EEG 中部分潜在时序过程表示为独立 slots,再用受限交互建模过程间依赖,可能减少不同过程在整体状态中的混合。可复用的是模块化状态演化与交互框架;需要改造的是 EEG 输入编码、slot 分配和任务输出。原研究面向多对象视觉任务,所需对象结构与监督条件尚不明确,EEG 中也不能直接将 slot 等同于脑区或通道。低信噪比、容积传导导致的观测混合、跨被试差异、通道配置变化及小数据训练均可能使分解失效。一个可检验的小实验是在固定 EEG 任务和同一跨被试划分下,比较容量匹配的整体式 SSM 与 SlotSSMs,并对跨 slot 交互做消融,观察模块化是否改善泛化而非仅增加容量。已有 EEG 相关工作尚未检索确认。

    阅读价值:SlotSSMs 将独立状态演化与受限的跨 slot 交互结合,为研究模块化长程时序建模提供了可核对的机制思路,但其在 EEG/BCI 中的适用性尚未验证。

  7. OpenReview · State space models73

    SMamba:通过可伸缩状态空间模型实现任意尺度超分辨率

    基于摘要分析。该研究针对任意尺度超分辨率(ASSR),提出正文称为 S³Mamba 的方法,旨在用单一模型将低分辨率图像重建到任意目标尺度。其核心贡献是通过 Scalable State Space Model(SSSM)构建可伸缩的连续表示空间,并结合尺度感知自注意力强化不同尺度下的全局重要特征建模。 机制上,Implicit Neural Representations(INR)通过坐标与像素值之间的连续表示支持任意尺度重建。作者认为,现有基于 CNN 和 Transformer 的方法受到计算复杂度及长程依赖建模能力的限制;SSSM 在离散化过程中调制状态转移矩阵与步长采样矩阵,以实现尺度可调的连续表示建模。作者报告该机制具有线性计算复杂度,但摘要未说明其对应的复杂度变量、完整网络开销或具体调制形式,尚需全文核对。 作者报告,在合成及真实场景基准上的实验取得了最先进性能和任意超分辨率尺度下的较强泛化能力。摘要未提供数据集名称、训练与测试尺度划分、对照方法、指标或数值,因此目前不能定量判断收益,也不能确认对未见尺度的具体泛化范围;实验协议、消融及统计信息尚未验证。 平台推测(待验证):其潜在 EEG 关联是将尺度条件化的状态空间建模用于不同采样率下的连续时间信号重建,而非直接复用图像超分辨率效果。该假设依赖可建立的时间坐标和低、高采样率监督配对;可考察复用 SSSM 的离散化调制机制,输入表示与尺度感知模块则需适配 EEG 的时间轴、通道布局及生理频带。低信噪比、跨被试差异、通道缺失和小数据可能导致噪声放大或虚假高频重建,且上采样不能保证恢复已丢失的生理信息。一个可证伪的小实验是对高采样率 EEG 进行受控抗混叠降采样,在按被试隔离的划分中比较该机制、固定尺度模型与插值基线,并测试未见采样倍率下的波形误差及频谱保真度。相关 EEG 工作尚未检索确认。

    阅读价值:值得关注其通过离散化过程中的状态转移与步长采样调制构建尺度连续表示的机制,但任意尺度泛化、计算开销及向 EEG 迁移的有效性仍需核对全文或实验验证。

  8. OpenReview · State space models71

    Pan-Mamba:基于状态空间模型的有效全色锐化

    基于摘要分析。Pan-Mamba 研究全色锐化问题,即融合低分辨率多光谱图像与高分辨率全色图像,生成高分辨率多光谱图像;其核心贡献是利用 Mamba 的全局信息建模能力,并设计两个面向跨模态交互与融合的组件。 机制方面,channel swapping Mamba 通过交换部分全色与多光谱特征通道,开展轻量级跨模态交互;cross-modal Mamba 则利用模态之间的内在关系增强信息表示。摘要未提供具体状态空间参数化、特征序列化方式、损失函数、训练与推理设置,不能据此确定网络结构细节或计算成本。 作者报告,在多个数据集上的实验中,Pan-Mamba 超过所比较的当前先进方法,获得更好的全色锐化融合结果;但摘要未给出数据集名称、划分、基线、指标或数值,因此尚不能判断优势幅度及不同评估协议下的稳健性。作者将该工作描述为首次探索 Mamba 在全色锐化中的潜力,此优先性主张尚未独立核实。摘要提供了源码地址,但实现与复现条件尚未验证;实验协议、消融及统计信息亦尚未验证。 平台推测(待验证):迁移假设是将跨模态信息交换机制用于 EEG 与其他同步信号的融合,而非直接复用图像锐化网络。原任务依赖空间对应且分辨率互补的图像输入;EEG 场景需重新定义时间对齐、通道映射、特征序列化和任务监督。可能复用的是跨模态交换与融合模块,需改造的是输入表示及输出目标。低信噪比、跨被试差异、通道缺失和小数据可能使交换特征引入噪声或过拟合。一个可证伪的小实验是在固定数据划分与相近参数预算下,对同步 EEG 多模态任务比较简单融合、加入 channel swapping 及进一步加入 cross-modal Mamba 的表现,并测试模态噪声扰动下的稳定性;这不构成已验证的 BCI 效果,已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读其 channel swapping Mamba 与 cross-modal Mamba 如何实现跨模态信息交换,但融合优势及向 EEG 多模态任务迁移的有效性仍需核对实验与验证。

  9. OpenReview · State space models73

    SMamba:通过可伸缩状态空间模型实现任意尺度超分辨率

    基于摘要分析。该研究针对任意尺度超分辨率(ASSR),提出正文称为 S³Mamba 的方法,利用 Scalable State Space Model(SSSM)构建由低分辨率图像导出的可伸缩连续表示空间,使单一模型能够处理不同放大尺度。其核心贡献是将尺度调制引入状态空间模型的离散化过程,并结合尺度感知自注意力增强不同尺度下的全局重要特征感知。 机制与创新:ASSR 借助 Implicit Neural Representations(INR)建立坐标与像素值的连续表示,突破固定放大倍数的限制。作者认为,现有 CNN 和 Transformer 方法面临计算复杂度及长程依赖建模方面的挑战。SSSM 在离散化时调制状态转移矩阵与步长采样矩阵,作者声称由此实现线性计算复杂度的连续表示建模。摘要未给出调制函数、尺度条件的具体输入方式、训练损失及推理流程;线性复杂度对应的计算范围,以及加入自注意力后的整体开销,尚需全文核对。 结果与证据边界:作者报告,在合成与真实场景基准上取得最先进性能,并在任意超分辨率尺度下表现出较强泛化能力。摘要未列出数据集名称、训练与测试尺度划分、对照基线、指标或具体数值,因此不能判断未见尺度上的收益及适用边界。实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的假设是,尺度条件化的状态空间离散化可能用于 EEG 不同采样间隔下的连续时间表示;但图像空间放大与 EEG 时间采样变化并非同一任务,原领域结果不能视为 BCI 有效性的证据。可考虑复用条件化离散化模块,将图像坐标与像素监督改为时间坐标和信号重建监督,并处理通道拓扑及抗混叠约束。低信噪比、跨被试差异、通道不一致和小数据可能使模型主要拟合插值规律。一个可证伪的小实验是在固定被试划分及统一抗混叠降采样流程下,对比该模块、普通状态空间模型和传统插值在未见采样间隔上的重建误差及下游任务表现。相关 EEG 工作尚未检索确认。

    阅读价值:值得核对其通过尺度调制状态空间离散化来构建连续表示的机制,以及线性复杂度的适用范围;作者报告的任意尺度泛化优势仍需结合全文实验协议验证。

  10. OpenReview · State space models77

    STREAM:面向稀疏几何数据的通用状态空间模型

    基于摘要分析。STREAM 面向点云、事件视觉等稀疏且非结构化的几何数据,将几何结构显式编码进状态空间模型的参数化,而不是仅依赖序列化预处理及模型自行推断几何关系。其核心贡献是利用坐标的相对差异控制状态空间模型的步长,并基于 Mamba selective state-space model 与修改后的 CUDA kernel 实现高效计算。 机制上,状态空间模型的线性动态由时间或空间坐标等一维变量驱动,STREAM 将相对坐标差注入这一动态变量对应的步长。作者称,由此形成的几何操作可在 O(N) 步中计算 N 个点之间的全点对交互;该表述不应直接等同于已验证的端到端运行时间或显存复杂度,具体交互定义、点的遍历顺序与实现条件尚需正文核对。 作者报告,在从头训练的 ModelNet40 和 ScanObjectNN 点云分析任务中,STREAM 改善了 PointMamba 基线表现,但摘要未提供具体指标数值。作者还报告,在 DVS128 Gestures 数据集全部 11 个类别的测试中取得 100% Accuracy,并声称这是首次达到该结果;测试划分、预处理、重复实验及统计信息尚未验证。摘要另称模型在事件视觉和音频分类等基准上具有竞争力,具体对照与实验协议尚未验证。 平台推测(待验证):假设相对坐标驱动的状态更新能保留不规则采样结构,它可能对应 EEG 中不规则时间采样或稀疏电极空间建模的问题。可考虑复用状态更新机制,但需改造 EEG 信号的点表示、时空坐标及遍历方式;低信噪比、跨被试差异、通道缺失与小数据训练都可能削弱该归纳偏置。一个可检验的小实验是在固定 EEG 数据划分和相同输入表示下,比较相对坐标步长与固定步长,并测试通道缺失时的性能变化。此为迁移假设,不是已证实的 BCI 收益;相关 EEG 工作尚未检索确认。复现还需核对完整模型配置、CUDA kernel、训练条件及代码可用性。

    阅读价值:值得核对 STREAM 将相对坐标差注入状态空间步长的机制及其修改后的 CUDA 实现,以评估稀疏几何归纳偏置的收益;摘要中的全点对交互与测试准确率仍需结合完整实验协议验证。

  11. OpenReview · State space models76

    GrassNet:状态空间模型与图神经网络的结合

    GrassNet 针对谱图神经网络中多项式滤波器低阶截断、缺乏图谱整体建模的问题,引入结构化状态空间模型(SSMs)来学习图谱滤波器。基于摘要分析,未取得论文全文。 核心机制是利用 SSMs 建模图信号在不同频率上的关联,并为图谱中的各频率生成特定校正。作者指出,传统多项式方法对相同频率的信号施加相同调制,在谱高度集中或存在大量数值相同的谱值时可能受到限制;作者声称 GrassNet 能学习任意图谱滤波器,并在理论上具有比多项式滤波器更强的表达能力。如何定义频率序列、如何处理重复特征值及对应特征空间、表达能力结论依赖哪些假设,均需查阅正文核对。 作者报告,在九个公开基准上的实验显示 GrassNet 在真实图建模任务中表现优于对照方法。摘要未提供基准名称、任务、划分、对照配置或具体指标,因此不能量化收益或判断不同协议下的可比性;实验协议、消融及统计信息尚未验证。实现、计算成本和复现条件也尚未验证。 平台推测(待验证):假设 EEG 被表示为具有明确拉普拉斯算子的通道图,GrassNet 的跨图谱频率关联建模可能用于检验多项式滤波表达受限这一瓶颈;这里的图谱频率不等同于 EEG 的时间频率。可考虑复用谱滤波机制,但通道图构建、时间信息整合和跨被试图对齐需要改造。低信噪比可能使图结构不稳定,通道变化可能改变谱基,小数据也可能增加过拟合风险。一个可证伪的小实验是在固定 EEG 通道图、相同时间编码器和相同跨被试划分下,对比 GrassNet 滤波与多项式滤波,并检查收益对图构建及通道扰动的敏感性。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对 GrassNet 如何利用 SSM 建模跨频率关联,以及其处理重复谱值和提升滤波表达能力的理论条件,这些机制为评估谱图方法在 EEG 图建模中的适用性提供了具体切入点。

  12. OpenReview · State space models72

    DGMamba:通过广义状态空间模型实现域泛化

    基于摘要分析。该研究针对视觉域泛化中的分布偏移问题,提出 DGMamba,尝试在保留 Mamba 全局感受野与线性复杂度优势的同时,减少隐藏状态和图像扫描机制对域特异信息的依赖。 框架包含 Hidden State Suppressing(HSS)与 Semantic-aware Patch refining(SPR)。HSS 用于减弱与域特异特征相关的隐藏状态对输出预测的影响。SPR 旨在让模型更关注对象而非上下文,其中 Prior-Free Scanning(PFS)打乱图像中的非语义 patch,以形成更灵活的序列;Domain Context Interchange(DCI)通过跨域融合 patch,将不匹配的非语义与语义信息组合起来,对 Mamba 进行正则化。摘要未提供隐藏状态筛选、语义识别、扫描操作及损失函数的具体实现,尚不能据此重建模型。 作者报告,在四个常用域泛化 benchmark 上,DGMamba 相较现有先进模型取得更优结果;摘要未列出 benchmark 名称、域划分、对照基线或指标数值,实验协议、消融及统计信息尚未验证。作者表示代码将公开,不等同于代码已可获取。 平台推测(待验证):其潜在 EEG 迁移路径是抑制被试或会话相关的域特异状态,以缓解跨被试、跨会话分布偏移。但原方法依赖图像 patch 的语义与上下文区分,以及跨域 patch 融合;EEG 中哪些时段、通道或频段属于任务信息而非背景信息,需要重新定义,不能直接套用对象与背景的划分。可尝试复用状态抑制思路,改造序列构建和跨域融合模块;低信噪比、通道差异及小数据可能导致任务相关状态被误抑制,或融合产生不合理信号。一个可证伪的小实验是在固定的跨被试 EEG 划分下,比较基础 Mamba 与仅加入 HSS 改造的版本,核对域信息降低是否伴随任务性能改善。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对的是 DGMamba 如何通过隐藏状态抑制与语义感知 patch 处理降低域特异信息影响;这些机制提供了域泛化研究的具体切入点,但摘要中的性能优势及其 EEG 可迁移性尚未验证。

  13. OpenReview · State space models70

    使用加权正则化神经网络的物理引导状态空间模型增广

    基于摘要分析。本文研究如何利用测量数据增广已有的非线性物理状态空间模型,提出采用加权函数正则化的 W-PGNN,在数据信息量较低的区域更依赖物理先验,在信息量较高的区域更信任数据。 核心机制:作者指出,经典 Physics-guided neural networks(PGNN)在输出层面惩罚对物理模型的偏离,但状态转移函数即使仅有较小参数差异,也可能产生显著不同的时间序列输出,因此这种约束可能导致保守估计。此外,经典方法以固定权衡超参数在整个状态空间施加正则化。W-PGNN 改为在代价函数中加入加权正则项,惩罚基线物理模型与最终辨识模型之间的状态函数及输出函数差异,并依据数据的信息量调节对先验的依赖。权重的具体定义、信息量估计方式、网络结构及优化流程尚未验证。 验证与边界:作者报告在一个基准示例上展示了该策略相对于现有 PGNN 方法的有效性。摘要未提供基准名称、数据划分、评价指标或提升幅度,实验协议、消融及统计信息尚未验证。复现需进一步核对基线物理模型、测量数据、权重构造与正则化超参数设置。 平台推测(待验证):迁移假设是,若 EEG 动态建模具备可信的状态空间先验,并能可靠估计不同状态区域的数据信息量,该机制可能帮助缓解稀疏观测区域中数据驱动模型偏离先验的问题。可复用的是函数层面的加权约束;需改造的是 EEG 状态定义、观测函数与信息量估计。低信噪比、跨被试差异、通道变化及小数据可能使权重估计失真,错误物理先验也可能引入偏差。一个可检验的小实验是在固定 EEG 数据划分和同一先验模型下,对比固定权重与信息量加权正则化的预测误差,并观察减少训练数据或加入噪声后的稳定性。相关 EEG 工作尚未检索确认。

    阅读价值:值得核对 W-PGNN 如何将物理先验约束从输出层面转向状态与输出函数层面,并按数据信息量调整约束强度;摘要中的基准验证尚不足以判断其对 EEG 建模的适用性。

  14. OpenReview · State space models72

    MambaVLT:用于视觉-语言跟踪的时间演化多模态状态空间模型

    基于摘要分析。MambaVLT 针对视觉-语言跟踪中时序信息利用不足、参考特征难以动态更新的问题,提出基于 Mamba 的多模态状态空间模型,通过随时间演化的状态表示支持目标跟踪,并自适应调节视觉与语言参考的权重。 机制方面,模型包含 time-evolving hybrid state space block 和 selective locality enhancement block,用于捕获多模态上下文信息与自适应更新参考特征;另设 modality-selection module,动态调整视觉和语言参考的权重,以缓解任一参考模态可能产生的歧义。摘要将 Mamba 状态演化的时序记忆能力与线性复杂度作为方法动机,但具体状态更新公式、模块连接、损失、训练流程及端到端计算开销尚未验证。 作者报告,该方法在多个基准上相较先进跟踪器表现良好;摘要未提供基准名称、数据划分、对照模型或量化指标,因此尚不能判断优势幅度及适用条件。实验协议、消融及统计信息尚未验证,代码与复现条件也需核对全文。 平台推测(待验证):其原问题依赖连续视觉序列及视觉、语言参考,时序状态更新与动态模态选择可能为 EEG 与辅助模态融合提供机制参考,对应长时序建模和模态可靠性变化的瓶颈;这不代表已验证的 EEG/BCI 效果。可考虑复用状态更新和模态选择思路,但需改造输入编码、时间对齐、参考表示与任务输出。EEG 的低信噪比、跨被试差异、通道变化及小数据可能导致状态累积噪声或模态权重失稳。一个可检验的小实验是在固定被试和划分的 EEG 多模态任务中,保持编码器与训练预算一致,对比固定融合与动态模态选择,并在辅助模态受扰时检验性能变化。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读其如何利用随时间演化的状态空间更新多模态参考特征,以及动态调节模态权重;具体性能优势与 EEG 迁移价值尚未验证。