跳到正文
OpenReview · EEG· Yusong Zhao; Edgar Y. Walker; Hao Wang; Lu Mi·· 2025-09-19精选AI 评分73

结构化视觉景观:生成多模态生物神经网络与人工神经网络的偏好表征

Structured Visual Landscape: Generating Preferred Representations in Multi-modal Biological and Artificial Neural Networks

AI 导读

基于摘要分析。该研究面向视觉表征解释问题,提出结构化视觉表征景观及生成模型 Vis-Lens,利用脑区或人工神经网络单元的激活信息约束潜空间,生成相应网络偏好的自然图像。研究对象是人工神经网络与人类视觉皮层的视觉响应表征,而非直接面向 BCI 控制或通信的解码任务。 机制上,Vis-Lens 整合变分自编码器与扩散模型,并引入基于激活分数的先验,对表征景观施加正则化。摘要称,通过直接修改受激活约束的潜变量即可生成偏好图像,从而避免繁琐的优化过程;具体先验形式、训练目标、潜变量修改方式,以及所避免的优化步骤范围尚未验证。 作者报告,该框架在人工神经网络及生物神经网络的视觉表征生成中有效,生物响应数据包括来自人类视觉皮层的 fMRI 和 EEG。作者报告其生成表现优于最先进方法,但摘要未提供评价指标、数值、对照方法或数据划分,因此尚不能判断优势的幅度与适用条件,也不能据此认定已实现逐试次视觉重建或 BCI 性能提升。 复现时需核对 EEG 响应如何转化为激活约束、fMRI 与 EEG 是分别评估还是联合建模,以及生成图像的偏好一致性与自然度如何测量。数据集、被试规模、被试内或跨被试协议、实验协议、消融及统计信息尚未验证;代码与模型权重的可用性亦未由当前材料确认。

阅读价值

值得关注 Vis-Lens 如何用激活分数先验约束生成潜空间,并在 fMRI 与 EEG 响应条件下生成偏好图像;其相对基线的优势及 EEG 评估方式尚待全文核验。

来源:OpenReview · EEG · openreview.net