跳到正文

算法、任务与模态

多模态 最新动态

多模态 研究索引；按可核对的标签归档，不以热度评价质量。

1,687 条精选近 30 天 198 条共收录 2,465 条

更新

精选归档 · 第 85 页

1月1日周六第 1681–1687 条
  1. OpenReview · EEG72

    利用同步 fMRI 与 Relevance Vector Machine 回归预测 EEG 单试次响应

    基于摘要分析。研究关注同步 EEG-fMRI 中能否利用一种模态的信息预测另一种模态的信号，采用多变量 Relevance Vector Machine（RVM）回归学习 fMRI 激活模式与 EEG 响应之间的关系，探索将空间分布的 fMRI 活动与特定 EEG 成分关联的方法。 研究任务包含听觉提示、视觉心理想象和视觉控制目标；这里的视觉心理想象不应等同于运动想象（MI）。方法以 fMRI 激活模式作为预测信息，以同步采集的 EEG 响应作为预测对象。摘要涉及诱发响应及诱导性振荡响应，但未给出特征构造、具体预测时间窗、RVM 配置或训练与测试划分。 作者报告，多变量回归能够从 fMRI 时间序列预测上述 EEG 响应，但预测结果在很大程度上受到血流动力学响应函数整体滤波效应的影响。对听觉诱发响应的进一步分析显示，单试次调制存在较小但具有统计显著性的贡献，可用于关联空间分布的 fMRI 激活模式与同步 EEG 的特定成分。摘要未提供效应量、预测指标或显著性检验细节，因此不能据此量化预测性能，也不能将其解释为已实现任意 EEG 波形重建。 这项工作的直接贡献是多模态脑信号耦合分析，而非已验证的 BCI 解码系统。复现时需核对同步采集与伪迹处理、血流动力学建模、试次对齐、预测目标定义及训练与测试划分，并确认如何区分整体滤波效应与单试次调制的贡献。被试数量、实验协议、消融及统计信息尚未验证；摘要也不足以判断跨被试或跨会话泛化能力。

    阅读价值：该研究值得阅读的具体原因是用 RVM 回归检验同步 fMRI 空间激活模式对 EEG 单试次响应的预测能力，并区分血流动力学滤波与单试次调制对预测的贡献，但其 BCI 应用价值尚未验证。

1月1日周四
  1. OpenReview · EEG78

    注意阅读期间的同步 MEG 与颅内 EEG 记录

    基于摘要分析。研究关注不同空间尺度记录的神经振荡之间的关系，通过在四名癫痫患者中同步记录 MEG 与 iEEG，比较阅读注意任务中的频带响应强度及空间组织，并利用 iEEG 核对部分 MEG gamma 调制的皮层来源。 任务中，红色与绿色词语混合呈现，同一颜色的词语组成连贯故事，患者被要求注意指定颜色。研究分析词语呈现后的 alpha、beta 和 gamma 振荡；MEG 除传感器级分析外，还采用滑动窗口波束形成技术开展源级时频重建。 作者报告，在该四名患者的阅读任务中，iEEG 时频分析显示受注意调制的高 gamma（50–150 Hz）功率增加，以及 alpha/beta（9–25 Hz）功率抑制；MEG 源重建也观察到与 iEEG 效应相伴的明显 alpha/beta 抑制。两名患者的 MEG 传感器级高 gamma 增强较难解释，而源级时频重建揭示了与 iEEG 结果相符的额外激活模式。作者报告，借助 iEEG，确认了若干 MEG gamma 调制源确实来自皮层，而非肌电或眼部伪迹；这一结论不应扩展为所有 MEG gamma 活动均已排除伪迹。 研究的主要价值是跨记录尺度的生理对应与源定位核验，而非提出或验证 BCI 分类算法。样本限于四名癫痫患者，其向其他人群、任务和记录条件的可推广性仍需评估。摘要未提供电极覆盖、同步采集细节、波束形成参数、试次数及统计检验信息，实验协议、效应量与复现条件尚未验证。

    阅读价值：该研究以同步 iEEG 为参照核对 MEG 阅读注意相关振荡及其皮层来源，值得用于理解传感器级与源级分析的可解释性差异，但其证据不等同于 BCI 解码有效性。

12月31日周三
  1. OpenReview · Representation learning70

    基于显著性视觉注意的跨模态身体表征

    基于摘要分析。本文研究物理智能体如何从多种感觉输入中建立身体表征，提出将视觉、触觉与本体感觉关联的方法，重点解决哪些感觉信息应被相互关联的问题。研究对象是机器人身体表征的计算建模及其与神经生理现象的对应，而非 EEG 解码或 BCI 算法。 核心机制是以触觉激活作为构建过程的触发信号：机器人接触物体时，通过基于显著性图的视觉注意定位相关身体部位，构建其视觉感受野，并将该部位视为末端执行器；与此同时，将本体感觉信息与这一视觉感受野关联，形成跨模态身体表征。摘要以日本猕猴工具使用过程中身体表征可动态重构的神经生理证据作为研究背景，但未说明该方法是否直接模拟了工具使用后的表征扩展。 作者报告，计算机仿真结果与日本猕猴顶叶神经元的活动具有可比性，并考察了不同条件，以分析哪些信息对产生类似神经生理发现的结果重要。摘要未提供具体比较指标、仿真规模、条件设置或统计结果，因此尚不能判断这种对应是定性现象一致，还是经过定量拟合验证。 复现时需核对显著性图的计算方式、触觉触发与视觉输入的时间对应规则、本体感觉的编码及关联更新机制，以及神经生理对照的具体判据。实验协议、消融及统计信息尚未验证；现有材料不支持将仿真结果进一步解释为已验证的 EEG 或 BCI 效果。

    阅读价值：值得阅读之处在于以触觉事件触发视觉感受野构建，并关联本体感觉，为研究跨模态身体表征的形成提供了具体机制；其与猕猴顶叶神经元活动的对应程度仍需核对全文。

1月1日周二
  1. OpenReview · EEG73

    增强的 EEG gamma 频段活动反映视觉到听觉物体启动中的多感官语义匹配

    基于摘要分析。该研究考察视觉与听觉物体信息的语义匹配是否体现为 gamma 频段活动变化，采用视觉—听觉跨模态启动范式，在高密度 EEG 记录中操纵自然物体刺激对的语义一致性。其主要贡献是结合行为、ERP、时频活动及源重建，分析多感官语义匹配的时间进程与可能的皮层来源。 被试执行语义分类任务。作者报告，相较于语义不一致刺激，语义一致刺激产生跨模态启动效应，即促进听觉物体识别；摘要未给出具体行为效应量。作者报告，两类条件的 ERP 在 250–350 ms 出现差异，分布式线性源模型将该差异定位于左侧颞中回（BA 21）。摘要未明确该 ERP 时间窗的计时参照点。 针对 gamma 活动，作者报告，语义一致刺激对在听觉刺激出现后 120–180 ms 引起更强的 40–50 Hz 活动，源重建显示最大增幅位于左侧颞中回（BA 21）。作者据此认为，gamma 频段振荡支持多感官汇聚区域中的跨模态语义匹配假说。不过，摘要所述条件间活动增强与源定位结果，并不直接等同于已验证不同感觉区域之间的神经同步机制或因果关系。 该工作研究的是多感官知觉与语义加工，而非 BCI 算法或在线控制。被试数量、刺激配置、EEG 采集与预处理、gamma 活动的具体估计方法及伪迹控制、源重建约束、效应量和统计信息尚未验证；复现时需结合全文核对这些条件。摘要未提供 BCI 解码评估，不能将所报告的条件效应直接解释为可泛化的分类性能。

    阅读价值：该研究通过语义一致性操纵，将跨模态启动行为、早期 gamma 频段活动与较晚 ERP 差异联系起来，值得用于考察多感官语义匹配的 EEG 时间进程，但不能据此认定其具有 BCI 解码效用。

1月1日周一
  1. OpenReview · EEG71

    局灶性癫痫发作间期 fMRI 的独立成分分析：与基于广义线性模型的 EEG 相关 fMRI 分析比较

    基于摘要分析。本研究针对局灶性癫痫同步 EEG–fMRI 分析依赖头皮 EEG 可见发作间期癫痫样放电（IED）的问题，比较数据驱动的空间独立成分分析（ICA）与 EEG 驱动的广义线性模型（GLM），评估 ICA 是否能够提取与 IED 相关的 BOLD 活动。这是癫痫相关脑功能成像研究，并非 BCI 解码方法研究。 传统 GLM 使用头皮 EEG 上识别的 IED 构建分析模型；当 EEG 未显现 IED 时，该策略难以发挥作用。作者对八名局灶性癫痫患者的 fMRI 数据应用空间 ICA，将提取的独立成分自动分类为 BOLD 相关成分、运动伪影、EPI 磁敏感伪影、大血管成分及高空间或时间频率噪声，再依据时空标准评估 ICA 与 EEG 驱动 GLM 结果的一致性。摘要未提供分类器具体实现及一致性判据。 作者报告，在上述八名患者的分析中，自动分类使候选独立成分数量减少 78%，平均保留 16 个 BOLD 相关成分；每名患者均有一个独立成分满足与 IED 驱动 GLM 结果相对应的时空标准。这支持 ICA 能够提取与已知 IED 相关 BOLD 模式一致的成分，但不等同于对 EEG 不可见癫痫活动的独立验证。 作者认为，其余成分与自发脑活动的 BOLD 模式相符，并可能包含头皮 EEG 未显现的癫痫活动；这一解释仍需独立证据确认。摘要未给出额外成分的临床参照验证、定位准确性或假阳性指标。实验协议、消融及统计信息尚未验证，复现还需核对 fMRI 预处理、ICA 配置、自动分类规则及 GLM 建模细节。当前材料不支持将该结果直接推断为 EEG/BCI 性能提升。

    阅读价值：值得阅读其空间 ICA 成分筛选与 EEG 驱动 GLM 的时空一致性验证思路，但摘要不足以确认额外成分能否识别头皮 EEG 未显现的癫痫活动。

  2. OpenReview · EEG74

    改善与 3-T fMRI 同步记录的听觉事件相关电位质量：去除心搏冲击伪迹

    基于摘要分析。本研究针对同步 EEG–fMRI 记录中心动周期相关心搏冲击伪迹（ballistocardiogram artefact，BCG）严重污染 EEG 的问题，系统比较 optimal basis set（OBS）、独立成分分析（ICA）及二者组合 OBS–ICA，重点考察伪迹抑制与听觉 ERP 成分 N1 保真度之间的关系。 OBS 属于逐通道校正方法，ICA 属于空间滤波方法，OBS–ICA 则结合两者。研究将三种处理流程应用于 12 名被试在 3-T 扫描仪内进行 fMRI 采集时同步记录的 60 通道 EEG。评估不仅包括残余 BCG 伪迹，还包括 N1 的信噪比（SNR）、幅度及头皮地形分布，并利用等效电流偶极子建模考察定位误差。 作者报告，三种方法均显著减少了伪迹，但相对于未经 BCG 校正的数据，ICA 处理后的 N1 SNR 和幅度显著降低，提示伪迹减少并不必然意味着目标 ERP 质量改善。相较之下，作者报告 OBS 与 OBS–ICA 均明显改善了 N1 SNR。源定位方面，三种校正方法相对于未经 BCG 校正的数据均呈现定位误差减小的描述性结果，其中 OBS–ICA 的改善达到统计显著；摘要未给出具体效应量或检验数值。 该结果的直接适用范围是所述同步 EEG–fMRI 条件下的 BCG 校正与听觉 N1 分析，不能据此断言 ICA 在其他 EEG 场景下普遍较差，也不能推导出 BCI 解码性能提升。复现时需核对 BCG 周期识别、OBS 基函数设置、ICA 成分筛选、组合处理顺序及偶极子建模参照等细节；具体实验协议、消融及统计信息尚未验证。

    阅读价值：该研究在同一组同步 EEG–fMRI 数据中比较 OBS、ICA 与 OBS–ICA，并同时考察残余伪迹、N1 信噪比与源定位误差，有助于判断去伪迹是否以损伤目标 ERP 为代价。

12月31日周六
  1. OpenReview · EEG79

    评估 EEG 逆问题中基于 fMRI 的先验的相关性：贝叶斯模型比较方法

    基于摘要分析。研究针对 EEG/MEG 皮层源重建解不唯一的问题，提出通过贝叶斯模型比较评估 fMRI 衍生空间先验是否适合观测数据。核心贡献是将“是否应引入跨模态先验”转化为可量化的比较问题，而不是直接假定生物电活动与代谢活动在空间上相匹配。 方法上，作者比较采用 fMRI 信息先验与采用非信息先验时对 EEG/MEG 数据的适配程度，并使用 Bayes factor 作为纳入或不纳入信息先验的依据。这一机制直接对应多模态源定位中的关键风险：外部成像约束可能减少逆问题的不确定性，但不匹配的约束也可能影响重建。摘要未给出先验分布、似然、超参数处理及 Bayes factor 的具体计算方式，尚不能据此复现推断流程。 验证方面，作者报告进行了广泛仿真，将模拟 EEG 源的扰动版本构造为 fMRI 衍生先验，以考察先验与真实源不一致时的适用性；作者还指出，该推断框架可推广至优化信息先验的引入方式。摘要未提供扰动类型、仿真规模、噪声条件、判定阈值或定量结果，实验协议、消融及统计信息尚未验证，也无法确认其在真实 EEG/MEG 与 fMRI 配对数据上的表现。 该工作的明确研究对象是多模态约束下的 EEG/MEG 逆问题，并非 BCI 解码性能验证。阅读全文时，应重点核对模型证据对先验设定及噪声假设的敏感性、先验不匹配的仿真覆盖范围，以及推广至先验优化时的具体实现。其对后续 BCI 系统的价值仍需单独验证。

    阅读价值：值得阅读的具体原因是，该研究用 Bayes factor 比较 fMRI 空间先验与非信息先验对 EEG/MEG 数据的适配性，为是否引入跨模态约束提供可核对的统计依据，而非默认两类活动一致。