ROAMM:用于自然阅读中多模态人类注意力解码与 EEG-to-text 建模的基准数据集
基于摘要分析。该研究针对自然阅读中的心智游移(mind-wandering,MW)检测及 EEG-to-text 建模,提出 Reading Observed At Mindless Moments(ROAMM)多模态数据集,并提供标准化跨被试 MW 检测基准。 数据集包含 44 名参与者在自然、多页阅读过程中采集的共 50 小时同步 EEG 与眼动记录,同时提供眼动事件、页面级理解得分,以及通过回顾性自我报告获得的文本跨度级 MW 标注。这些信息支持联合研究生理信号、阅读行为、理解表现与注意状态,但摘要未说明各类标注的时间对齐方式、跨度定义及回顾性报告的可靠性。 在 MW 检测任务中,作者采用留一被试法(leave-one-subject-out)的 Cross-subject 评估,报告监督模型最高达到 0.609 AUROC;该指标不能解释为 Accuracy。模型类型、输入模态、训练与验证划分细节、对照基线及统计不确定性尚未验证,因此不能据此判断某一种模态或方法的优势。 作者还在带有或不带有 MW 标签的阅读片段上评估 EEG-to-text 解码,并报告 MW 发作期间解码表现下降。摘要未提供具体解码指标、下降幅度或该任务的数据划分协议,亦不足以确认这种关联具有因果解释。 该数据集的直接研究价值在于为自然阅读条件下的 MW 检测、EEG-to-text 解码和多模态表示学习提供共同数据与评估入口。复现前需核对数据获取条件、EEG 与眼动预处理、同步与标注流程,以及 EEG-to-text 的文本目标和评估设置;实验协议、消融及统计信息尚未验证。
阅读价值:ROAMM 将自然阅读中的同步 EEG、眼动与心智游移标注纳入标准化跨被试评估,值得用于核对注意状态与 EEG-to-text 解码表现的关系,但标注可靠性及具体解码协议尚未验证。