OpenReview · EEG· Konstantinos Kontras; Christos Chatzichristos; Huy Phan; Johan A. K. Suykens; Maarten De Vos·· 2023-01-01精选AI 评分74
CoRe-Sleep:面向不完备模态的鲁棒时间序列多模态融合框架
CoRe-Sleep: A Multimodal Fusion Framework for Time Series Robust to Imperfect Modalities
AI 导读
基于摘要分析。该研究面向自动睡眠分期,提出 Coordinated Representation 多模态融合网络 CoRe-Sleep,旨在利用 EEG 以外的生理记录信息,提高 EEG 等模态含噪或缺失时的分析鲁棒性。其主要研究对象是睡眠阶段序列标注,而非 BCI 控制任务。 方法强调对多模态表征进行协调,使模型能够处理含噪或缺失的模态片段,并支持使用不完整数据训练。摘要未披露具体模态组合、表征协调机制、网络结构、损失函数或缺失片段的处理方式,因此尚不能判断其鲁棒性主要来自哪些模块。 作者报告,在 SHHS-1 上,同一个模型可用于多模态和单模态测试,并在两类输入条件下取得作者所称的最先进性能;作者还报告,多模态训练对单模态测试表现有正向影响。摘要没有提供具体指标、数值、数据划分、对照基线及噪声或缺失的构造方式,因而无法量化增益,也不能将这些结果视为跨被试或跨会话泛化已得到验证。实验协议、消融及统计信息尚未验证。 阅读与复现时,值得核对训练和测试阶段的模态可用性是否一致、缺失片段的定义、噪声强度,以及多模态训练相对单模态训练的对照设置。该工作为不完备生理信号的睡眠分期提供了方法方向,但摘要中的临床应用目标不等同于已完成临床验证。
阅读价值
值得关注其以单一模型兼容多模态与单模态输入、并利用不完整数据训练的设计,但对噪声和模态缺失的鲁棒性仍需结合具体实验协议核验。
来源:OpenReview · EEG · openreview.net