跳到正文
OpenReview · Representation learning· Wenhui Zhu; Xiwen Chen; Peijie Qiu; Aristeidis Sotiras; Abolfazl Razi; Yalin Wang·· 2024-09-30精选AI 评分76

DGR-MIL:探索用于全切片图像分类的多实例学习多样化全局表示

DGR-MIL: Exploring Diverse Global Representation in Multiple Instance Learning for Whole Slide Image Classification

AI 导读

基于摘要分析。该研究针对组织病理全切片图像(WSI)分类中的弱监督多实例学习(MIL),提出聚合方法 DGR-MIL,通过一组全局向量概括实例集合,同时建模实例相关性与多样性。原论文的主要研究对象是肿瘤病理图像,而非 EEG 或 BCI。 机制上,DGR-MIL 以 cross-attention 将实例间相关性的建模转为实例嵌入与全局向量之间的相似性建模;其直觉是,相似实例通常与同一全局向量具有较高相关性。为使全局向量覆盖整个 bag 的不同信息,方法结合两项机制:positive instance alignment 将全局向量拉向正实例中心,例如包含肿瘤的图像实例;基于 determinantal point process 的多样化学习进一步促进全局表示之间的差异。作者称后者高效且具有理论保证,但具体目标函数、保证条件及正实例的识别方式尚未验证。 作者报告,在 CAMELYON-16 和 TCGA-lung cancer 数据集上,DGR-MIL 优于所比较的先进 MIL 聚合模型;摘要未提供具体指标、数值、数据划分与计算开销,不能据此量化提升或比较不同协议。摘要提供了代码仓库,但实现、实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 任务可将一段记录表示为多个时间窗构成的 bag,并仅提供记录级标签,该聚合机制可能用于兼顾稀疏判别片段与片段多样性;这是假设,不是已证实的 BCI 效果。可复用的是全局向量与 cross-attention 聚合,需改造的是 EEG 实例编码器及正实例对齐规则。低信噪比可能使多样性机制保留伪迹,被试和通道差异可能主导全局表示,小数据也可能导致全局向量不稳定。一个可检验的小实验是在固定编码器与 Cross-subject 划分下,比较普通注意力聚合和 DGR-MIL 聚合,并分别移除对齐与多样化机制,观察预先指定的分类指标及计算开销。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对其以全局向量、正实例对齐和 determinantal point process 联合建模实例多样性的机制,以及相对于实例相关性聚合的性能与计算开销;其在 EEG 弱监督聚合中的价值尚未验证。

来源:OpenReview · Representation learning · openreview.net