在脑海中重放电影:从 EEG 解码动态视觉感知与回忆
Replaying the Movie in Your Mind Decoding Dynamic Visual Perception and Recall from EEG
该研究关注人在内部重放动态场景时,哪些视觉表征仍可从 EEG 中解码,并提出配对自然视频观看与即时视觉回忆的 EEG 基准 PAIR。基于摘要分析,尚未取得论文全文。 PAIR 收集了 20 名被试的数据,采用交错、逐片段的实验范式,在固定试次序列内将视频观看与其后的即时视觉回忆配对,以比较相同刺激内容下外部驱动的感知与内部生成的回忆。基准覆盖细粒度与粗粒度的层级语义分类,以及运动、颜色、物体数量、人脸和人物存在等元特征解码;另设状态解码任务,区分感知与回忆。 在被试内验证协议下,作者报告,若干模型—任务组合在感知与回忆条件下的表现数值接近;经过多重比较校正,两项粗粒度比较中感知条件的 Accuracy 更高。数值接近不能直接视为统计等效,也不能单凭任务表现认定两种条件共享相同神经表征。作者同时报告,在当前验证协议下,感知与回忆状态高度可分;消融 alpha 频段后,状态分类 Accuracy 仍保持较高水平,但这一结果不能排除眼动或其他任务相关因素的贡献。 阅读重点是区分“视觉内容可解码”与“任务状态可区分”:二者回答不同问题,状态分类结果并不直接证明回忆内容得到有效恢复。摘要未提供具体模型、分数、训练测试划分及消融实现,固定试次顺序的处理、实验协议、消融及统计信息尚未验证;当前结论也不能外推为跨被试、跨会话或跨数据集的泛化能力。
PAIR 将同一视频内容的观看与即时视觉回忆配对,为检验感知与回忆中哪些动态视觉信息可被 EEG 解码提供了直接对照,但状态可分性仍需结合固定试次顺序及眼动等任务相关因素审慎解释。
来源:arXiv · EEG 与神经表征 · arxiv.org