基于多模态深度学习的驾驶疲劳检测

基于摘要分析。本文研究如何结合局部 EEG 与额部 EOG 改善驾驶疲劳检测，核心贡献是考察 EEG 采集脑区，并利用深度自编码器学习两种模态的共享表征。 方法上，作者先比较不同脑区的 EEG 与额部 EOG 联合提取共享特征的表现，再提出基于深度自编码器的多模态融合策略。作者报告，在所比较的脑区配置中，六通道颞区 EEG 与额部 EOG 的组合表现最佳。摘要未披露自编码器结构、损失函数、输入特征、模态对齐方式及训练流程，这些实现细节尚未验证。 评估涉及 21 名被试，并与其他融合策略进行比较。作者报告，其多模态方法取得最佳表现，平均 COR 为 0.85、RMSE 为 0.09。摘要未说明 COR 的具体定义、疲劳目标的标注或归一化方式，也未交代被试内或跨被试划分，因此上述数值只能在原研究协议下理解，不能直接与其他驾驶疲劳检测结果比较。作者认为该方法能够学习有效的跨模态共享表征并显著改善检测性能；具体对照、消融及统计信息尚未验证。 复现时需从全文核对疲劳任务与标签来源、EEG 和 EOG 的同步采集及预处理、六通道的具体位置、训练与测试划分，以及 COR、RMSE 的计算和汇总方式。该研究直接面向驾驶疲劳检测，摘要中的结果不应扩展为其他 EEG 任务或通用 BCI 性能的证据。