跳到正文
OpenReview · Representation learning· Ron Keuth; Lasse Hansen; Maren Balks; Ronja Jäger; Anne-Nele Schröder; Ludger Tüshaus; Mattias P. Heinrich·· 2024-01-01精选AI 评分77

DenseSeg:利用密集图像到形状表示联合学习语义分割与标志点检测

DenseSeg: Joint Learning for Semantic Segmentation and Landmark Detection Using Dense Image-to-Shape Representation

AI 导读

基于摘要分析。DenseSeg 研究医学图像中语义分割与解剖标志点检测的联合学习,提出以全卷积架构预测密集图像到形状表示,将像素级图像信息与解剖形状对应关系结合。其主要研究对象是胸部 X 光和儿童腕部医学图像,而非 EEG 或 BCI 信号。 方法的核心是用密集解剖对应关系表示目标,使语义分割与标志点提取共享几何信息。作者称,该表示无需直接针对标志点本身训练,并允许在不重新训练的情况下添加新的标志点。摘要未说明形状表示的具体参数化、对应关系的构建方式、监督需求及联合损失,新增标志点的定义与提取条件也需查阅全文核对。 作者将方法与语义分割基线 nnUNet、采用几何深度学习的形状方法及基于卷积神经网络的标志点检测方法进行比较。评估覆盖两个医学影像数据集:一个包含肺、心脏和锁骨的胸部 X 光基准,另一个包含儿童腕部的 17 块不同骨骼。作者报告,在胸部数据集的标志点检测评估中,DenseSeg 与标志点检测基线误差分别为 2.6±0.9 mm 和 2.7±0.9 mm;在更复杂的腕部数据集上,分别为 1.1±0.6 mm 和 1.9±0.5 mm。摘要未交代这些数值中离散项的定义,也未给出样本量、数据划分或统计检验信息,不能据此判断统计显著性。 作者据此认为密集几何形状表示有助于复杂标志点检测,并称其优于既有热图回归方法;但摘要没有提供分割指标,尚不能判断联合学习对分割性能的影响。具体数据集名称、实验协议、消融及统计信息尚未验证。该机制依赖图像中的解剖结构与空间对应关系,当前材料未建立其与 EEG/BCI 解码的具体对应路径,因此不据此推断 BCI 有效性。

阅读价值

值得核对其密集解剖对应表示如何支持分割与标志点检测联合学习,尤其是作者报告的无需针对新增标志点重新训练的能力及其适用边界。

来源:OpenReview · Representation learning · openreview.net