SSFMamba:用于全色锐化的空间–光谱融合状态空间模型
SSFMamba: Spatial-Spectral Fusion State Space Model for Pansharpening
基于摘要分析。该研究针对全色锐化(Pansharpening),将全色(PAN)图像与低分辨率多光谱(LR-MS)图像融合,重建高分辨率多光谱(HR-MS)图像。作者提出 SSFMamba,通过空间建模、光谱建模与自适应融合,显式刻画两类输入的空间–光谱特性。 核心机制包括三个模块:多尺度空间视觉状态空间(MSpa-VSS)模块在视觉状态空间(VSS)中引入多尺度卷积,同时建模空间依赖与多尺度空间特性;双向光谱视觉状态空间(BSpe-VSS)模块沿光谱通道进行双向扫描,学习连续光谱特性;门控空间–光谱融合(GSSF)模块则自适应融合两类特征。相较于摘要所述的现有 VMamba 方法,其设计重点是分别显式提取空间与光谱属性,再进行融合,而不只是采用视觉状态空间骨干。 作者报告在多个数据集上的实验显示 SSFMamba 具有性能优势,但摘要未提供数据集名称、划分协议、对照基线、指标或具体数值,因此无法核对优势幅度及适用条件。损失函数、训练设置、实验协议、消融及统计信息尚未验证;复现还需核对完整实现与数据预处理流程。 平台推测(待验证):该方法依赖图像空间结构及光谱通道的连续性。对于 EEG,可提出将空间建模与频率建模分开、再门控融合的假设,以探索电极空间关系与频率信息的联合利用;可考虑复用分轴建模和门控融合思路,但需改造扫描顺序、输入表示与空间邻接关系。EEG 电极不等同于连续光谱通道,低信噪比、跨被试差异、通道布局变化和小数据训练均可能使迁移失效。一个可检验的小实验是在相同 EEG 数据划分、预处理和训练预算下,对比双向频率扫描加门控融合与不含该扫描的对照,分别报告被试内和跨被试结果。以上不是本文已验证的 EEG 效果,已有 EEG 相关工作尚未检索确认。
来源:OpenReview · State space models · openreview.net