跳到正文
OpenReview · State space models· Zhixin Yan; Yan Zhong; Hongbin Xu; Wenjun Zhang; Lin Shu; Hongbin Xu; Wenxiong Kang·· 2024-01-01AI 评分68

PhysMamba:用于远程生理测量的状态空间对偶模型

PhysMamba: State Space Duality Model for Remote Physiological Measurement

AI 导读

基于摘要分析。PhysMamba 面向从面部视频提取非接触式生理信号的 Remote Photoplethysmography(rPPG),针对运动伪影、光照变化和噪声提出基于 Synergistic State Space Duality(SSSD)的时频双路径交互模型,并结合 Multi-Scale Query(MQ)促进信息交换与特征表示。 核心机制是将状态空间模型与注意力机制结合于双分支框架。作者声称这是首次以该框架进行此类整合,但其优先性尚未检索确认。摘要未说明两条路径的具体输入、时频变换、SSSD 的计算形式、MQ 的查询构造,以及训练损失和推理开销,不能据此判断实现细节或实时性能。 作者报告在 PURE、UBFC-rPPG 和 MMPD 上取得优于现有先进方法的结果,并声称具有更好的精度、泛化能力及噪声与动态条件下的鲁棒性。摘要未提供指标、数值、被试数量、数据划分或对照方法,尚不能确定这些结论对应被试内、跨被试还是跨数据集评估;实验协议、消融及统计信息尚未验证。复现时应核对时频交互、SSSD 和 MQ 各自的贡献,以及运动与光照扰动下的评估设置。远程患者照护属于作者提出的应用前景,不等同于临床验证。 平台推测(待验证):时域动态与频域周期信息的交互可能对 EEG 节律建模有参考价值,但 rPPG 依赖面部视频中的光学脉搏线索,不能直接等同于 EEG/BCI。迁移假设是保留状态空间与注意力交互模块,改造视频前端为多通道 EEG 表征;其风险包括低信噪比、跨被试差异、通道变化和小数据过拟合。可在固定跨被试划分与相同训练预算下,比较加入时频交互前后的 EEG 任务性能,以检验该机制是否有独立收益。相关 EEG 工作尚未检索确认。

来源:OpenReview · State space models · openreview.net