用于磁共振成像心血管疾病诊断的形状与纹理联合表征学习
Joint shape/texture representation learning for cardiovascular disease diagnosis from magnetic resonance imaging
研究针对心脏磁共振图像与网格通常被分开建模的问题,提出 mesh-image variational auto-encoder,联合学习配对网格与图像的表征,用于心血管疾病预测和诊断。基于摘要分析,其主要贡献是在训练时结合两种表示,并在训练后直接从原始图像提取形状感知图像表征(shape-aware image representation,SAIR)。 方法采用多通道变分自编码器,将心脏网格提供的形状信息与图像信息联合建模。作者报告,该方法可用于从图像重建三维心脏网格;提取 SAIR 时不需要分割掩码,其关注内容可在对应心脏网格上可视化。摘要未说明具体网络结构、潜变量融合方式、损失组成,以及训练阶段配对网格的构建流程,这些实现条件尚未验证。 作者报告在 UK Biobank 研究数据及另外两个数据集上开展实验,其中急性心肌梗死预测的 Accuracy 为 81.43%,并称优于元数据及传统心脏功能临床指标,包括左右心室容积、质量和射血分数。摘要未提供该结果对应的数据集、样本规模、划分方式、各基线数值及统计检验细节,因此不能据此判断跨人群泛化能力或比较收益的稳定性;实验协议、消融及统计信息尚未验证。 该研究的直接对象是心脏影像与几何网格,而非 EEG 或 BCI。其结论依赖配对影像和形状表示,当前材料未提供与神经信号任务的具体机制对应,因而不将其改写为 BCI 算法创新,也不据此提出 EEG 迁移效果主张。
值得核对其利用配对心脏网格与图像学习形状感知表征、并在使用阶段直接从图像提取表征的机制,但摘要中的诊断收益尚需结合数据划分和统计检验验证,不构成 BCI 有效性证据。
来源:OpenReview · Representation learning · openreview.net