跳到正文
OpenReview · EEG· Yu Hu; Yalda Mohsenzadeh·· 2025-01-22精选AI 评分77

自然视听事件神经加工的时空特征

Neural processing of naturalistic audiovisual events in space and time

AI 导读

基于摘要分析。本研究关注大脑感知自然视听事件时,不同层级信息在何处、何时得到加工。作者整理自然视频刺激,记录参与者观看带声音视频时的 fMRI 与 EEG,并结合 EEG-fMRI 融合及深度神经网络表征比较,刻画从感官特征加工到高层概念整合的时空过程。 作者报告,在该自然视听刺激实验中,早期跨模态交互呈非对称性:早期视觉与听觉区域均表征了声学信息,而视觉信息仅在视觉皮层中被识别。视觉与听觉特征的加工起始时间相近,但后续时间动态不同。更高层级的类别和语义信息较晚出现在多感觉联合区域;作者将此解释为晚期跨模态整合参与概念信息汇聚。摘要未提供具体起始潜伏期、效应量或统计结果,不能据此量化各阶段差异。 模型分析方面,作者将脑表征与双分支深度神经网络模型进行比较,并据此强调早期跨模态连接对于建立具有生物学合理性的视听感知模型的重要性。摘要未说明模型名称、分支结构、连接方式、训练目标及表征比较方法,因此这一结论的适用范围与对照条件尚未验证。 研究主要贡献是自然视听感知的神经机制与时空表征证据,而非 BCI 解码算法或性能验证。参与者人数、视频规模、EEG 与 fMRI 的采集及融合细节、数据划分、实验协议、消融及统计信息尚未验证;数据、刺激和实现是否公开也需核对全文。

阅读价值

该研究结合 EEG-fMRI 融合与双分支深度神经网络表征比较,为检验自然视听感知中的早期非对称跨模态交互和晚期语义整合提供了具体研究线索,但证据强度与复现条件仍需全文核验。

来源:OpenReview · EEG · openreview.net