RSMamba:基于状态空间模型的遥感图像分类
RSMamba: Remote Sensing Image Classification With State Space Model
基于摘要分析。本文研究遥感图像场景分类,提出基于状态空间模型(SSM)与 Mamba 的 RSMamba,通过动态多路径激活机制增强对二维非因果数据的建模能力,目标是在全局感受野与线性建模复杂度之间兼顾效率和表达能力。 核心机制:作者指出,原始 Mamba 的因果序列建模方式难以直接适配二维图像,因此引入动态多路径激活,同时保留原始 Mamba 的内在建模机制。摘要未说明路径如何构造、激活如何计算,以及图像序列化、训练损失和推理流程的具体实现;其效率优势仍需结合实际输入规模、硬件与运行测量核对。 作者报告,在 UC Merced、AID 和 RESISC45 遥感图像分类数据集上,F1 分别为 95.25、92.63 和 95.18,并称超过同期 Vim 与 VMamba。摘要未明确这些数值的单位、F1 的平均方式、训练测试划分及基线配置,因而不能据此进行跨协议比较。作者进一步提出其作为未来视觉基础模型骨干的潜力,这不等同于已验证的基础模型能力。摘要提供了代码仓库,但实现与论文的一致性尚未核验;实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的机制假设是,多路径建模可能缓解将 EEG 通道—时间数据组织为序列时,对单一路径和固定顺序的依赖。原研究依赖二维图像结构与分类任务,具体监督方式及训练规模尚未验证;用于 EEG 时需改造输入编码、通道空间关系和路径定义,不能将图像邻接关系直接视作电极关系。低信噪比、跨被试差异、通道变化及小数据可能使多路径机制拟合噪声或增加训练不稳定性。一个可证伪的小实验是在固定 EEG 数据划分、预处理和训练预算下,对比单路径 Mamba 与多路径变体,分别报告被试内和跨被试的同一指标,并检验通道顺序扰动下的表现。已有 EEG 相关工作尚未检索确认。
值得阅读其面向二维非因果数据的动态多路径激活机制及与 Vim、VMamba 的对照,但其对 EEG 空间—时间建模的价值尚未验证。
来源:OpenReview · State space models · openreview.net