跳到正文
OpenReview · State space models· Qinfeng Zhu; Yuanzhi Cai; Yuan Fang; Yihan Yang; Cheng Chen; Lei Fan; Anh Nguyen·· 2024-01-01AI 评分68

Samba:基于状态空间模型的遥感图像语义分割

Samba: Semantic Segmentation of Remotely Sensed Images with State Space Model

AI 导读

基于摘要分析。本文研究高分辨率遥感图像的语义分割,提出受 Mamba 启发的 Samba 框架,利用状态空间模型(SSM)提取全局及多层级语义信息,以应对 CNN 感受野受限和 ViT 处理长序列时的困难;研究对象是遥感图像,而非 EEG 或 BCI。 技术机制:Samba 采用编码器—解码器架构,以 Samba blocks 构成编码器,使用 UperNet 作为解码器。其核心思路是将 SSM 的长序列建模能力用于高分辨率视觉语义提取。摘要未披露图像序列化方式、具体块结构、损失函数、预训练方式及训练规模,这些实现细节尚未验证。 评估与结果:作者在 LoveDA、ISPRS Vaihingen 和 ISPRS Potsdam 上,将 Samba 与 CNN、ViT 分割方法进行比较。作者报告其取得优于所比较方法的表现,并声称首次展示了 SSM 在遥感图像语义分割中的有效性;摘要未提供具体指标、数值、数据划分或计算开销,因此不能据此确认优势幅度或效率收益。实验协议、消融及统计信息尚未验证。摘要提供了源码及基线实现地址,复现仍需核对正文中的数据预处理、训练配置与评估协议。 平台推测(待验证):迁移假设是,SSM 的长序列建模机制可能用于 EEG 长时间窗中的时序依赖提取,但原方法依赖图像空间结构与分割监督,原领域有效不等于 BCI 有效。可考虑复用 SSM 编码模块,改造输入为时间—通道序列,并将 UperNet 分割解码器替换为任务适配的预测头。低信噪比、通道布局变化、跨被试分布差异及小数据训练均可能使收益消失。一个可证伪的小实验是在固定 EEG 数据划分与相同预处理下,对比 SSM 编码器与匹配训练预算的 CNN 或 Transformer,分别评估被试内和跨被试表现及长时间窗计算开销;已有 EEG 相关工作尚未检索确认。

来源:OpenReview · State space models · openreview.net