跳到正文
OpenReview · Representation learning· Kun Wu; Yushan Zheng; Jun Shi; Fengying Xie; Zhiguo Jiang·· 2023-01-01精选AI 评分75

用于组织病理全切片图像表征学习的位置感知掩码自编码器

Position-Aware Masked Autoencoder for Histopathology WSI Representation Learning

AI 导读

基于摘要分析。本文研究组织病理全切片图像(WSI)的表征学习,提出自监督框架 position-aware masked autoencoder(PAMA),旨在利用未标注 WSI 改善切片级特征的判别能力,并应对既有 Transformer 空间嵌入难以适配 WSI 尺度变化与各向同性特征的问题。 方法上,作者引入 position-aware cross-attention(PACA)模块与 kernel reorientation(KRO)策略,以在训练中保持空间完整性并增强语义表征。摘要未展开掩码对象、重建目标、损失形式、位置编码实现及 KRO 的具体操作,因此目前只能确认其模块级设计意图,不能据此还原训练或推理流程。 作者报告,在包含 3,064 张 WSI 的公开 TCGA-Lung 数据集和包含 3,654 张 WSI 的内部 Endometrial 数据集上,与 6 种先进方法比较,PAMA 优于所比较的 MIL 与自监督学习方法。摘要未提供任务细目、数据划分、评价指标及具体分数;实验协议、消融及统计信息尚未验证。代码仅被表述为将公开,当前可用性尚未验证。 平台推测(待验证):其潜在可借鉴之处是将位置感知注意力与掩码建模结合,而非已证实的 EEG/BCI 性能提升。若用于 EEG,需将 WSI 空间关系改造为电极拓扑与时间关系,并验证 KRO 所依赖的空间假设是否成立;头皮电极位置及方向具有生理意义,不能直接沿用图像的各向同性假设。低信噪比、通道配置差异及小样本可能削弱收益。一个可证伪的小实验是在固定跨被试划分和相同预训练数据下,对照普通掩码自编码器、加入位置感知模块及进一步加入 KRO 的版本,检验增益是否稳定。相关 EEG 工作尚未检索确认。

阅读价值

值得核对 PAMA 如何在自监督 WSI 表征学习中处理尺度变化与空间结构,但其对 EEG/BCI 的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net