跳到正文
OpenReview · State space models· Zhixin Yan; Yan Zhong; Hongbin Xu; Wenjun Zhang; Lin Shu; Hongbin Xu; Wenxiong Kang·· 2024-01-01精选AI 评分70

PhysMamba:用于远程生理测量的状态空间对偶模型

PhysMamba: State Space Duality Model for Remote Physiological Measurement

AI 导读

基于摘要分析。该研究针对从面部视频提取生理信号的 Remote Photoplethysmography(rPPG)在现实环境中受运动伪迹与噪声干扰的问题,提出 PhysMamba,以基于 State Space Duality 的双路径时频交互学习更具代表性的特征。这是一项远程生理测量方法研究,不是直接的 EEG 或 BCI 验证。 核心机制是通过两条路径开展时频信息交互,并使用改进的 Cross-Attention State Space Duality(CASSD)促进路径间的信息交换与特征互补。摘要未说明两条路径的具体输入表示、CASSD 的计算形式、损失函数或训练与推理流程,这些技术细节尚未验证。 作者报告在 PURE、UBFC-rPPG 和 MMPD 数据集上进行了对比实验,并声称 PhysMamba 达到最先进性能,尤其适用于复杂环境。但摘要未提供具体指标、数值、数据划分、对照方法及复杂环境的定义,因此无法判断优势大小或不同评估协议下的泛化能力。实验协议、消融及统计信息尚未验证;复现还需核对视频预处理、参考生理信号、训练配置和实现可用性。 平台推测(待验证):若双路径时频互补确实能增强抗噪能力,其机制可能对应 EEG 中时域动态与频谱线索联合建模的需求。迁移需将面部视频输入模块改造为多通道 EEG 表征,并明确监督信号与数据规模,不能假定视频运动伪迹与 EEG 伪迹具有相同结构。低信噪比、跨被试差异、通道配置变化和小数据训练可能削弱交互模块的收益。一个可证伪的小实验是在固定 EEG 数据划分与匹配模型容量下,比较单路径、双路径无交互及加入 CASSD 的版本,并在相同噪声条件下评估;这仅是迁移假设,不是论文已验证结果。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对 PhysMamba 的双路径时频交互与 CASSD 如何应对运动伪迹和噪声,但摘要中的领先性能主张及其向 EEG 的迁移价值尚需验证。

来源:OpenReview · State space models · openreview.net