BrainOmni:统一 EEG 与 MEG 信号的脑基础模型
BrainOmni: A Brain Foundation Model for Unified EEG and MEG Signals
基于摘要分析。该研究针对 EEG 与 MEG 信号模式不同、传感器配置随模态和设备变化,以及现有模型通常依赖特定模态或数据集的问题,提出 BrainOmni,通过离散化脑信号表征与自监督预训练学习统一语义嵌入。其主要研究对象是异构 EEG 与 MEG 记录的统一建模,不能据此直接认定已验证在线 BCI 性能。 核心机制是 BrainTokenizer,将时空脑活动量化为离散表征。其中的 Sensor Encoder 编码传感器空间布局、方向和类型等属性,以支持不同设备与模态的数据接入;BrainOmni 再基于这些离散表征开展自监督预训练。摘要未说明量化方法、预训练目标、网络结构,以及传感器属性与信号特征的具体融合方式,这些实现细节尚未验证。作者将同时支持 EEG 与 MEG、纳入大规模 MEG 预训练等表述为首次贡献,其优先性尚未独立检索确认。 作者报告,预训练数据由公开来源整理并标准化,包括 1,997 小时 EEG 和 656 小时 MEG。作者报告,在一系列下游任务中,BrainOmni 优于已有基础模型和先进任务专用模型,并能泛化到未见过的 EEG 与 MEG 设备;联合 EEG-MEG(EMEG)训练在两种模态上均带来一致改善。摘要未提供具体任务、数据集、被试数量、划分方式、指标或提升幅度,因此无法判断这些结论对应被试内、跨被试、跨会话还是跨数据集评估,也不能直接比较不同协议下的效果。 复现时应重点核对预训练与下游数据的隔离方式、未见设备的定义、传感器元数据要求,以及联合训练相对单模态训练的对照条件。实验协议、消融及统计信息尚未验证。摘要提供了代码与检查点的公开地址,但其可用性、数据处理流程和复现完整性尚未核验。
值得核对 BrainTokenizer 如何利用传感器属性统一 EEG 与 MEG 表征,以及联合预训练对未见设备的泛化收益;摘要报告了积极结果,但具体评估协议与收益幅度尚未验证。
来源:OpenReview · EEG · openreview.net