跳到正文
OpenReview · Representation learning· Tomokazu Kaneko; Ryosuke Sakai; Takashi Shibata; Soma Shiraishi·· 2025-01-01精选AI 评分71

面向非模态实例分割的掩码增强对象中心对比学习

Mask augmented Object-Centric Contrastive Learning for Amodal Instance Segmentation

AI 导读

基于摘要分析。本文研究非模态实例分割(Amodal Instance Segmentation,AIS),即在存在遮挡时估计对象包含不可见部分的完整区域,旨在改善对象中心表示学习(Object-Centric Representation Learning,OCRL)的遮挡感知能力。核心方法是利用人工遮挡构造图像变换,在对象掩码层面进行对比学习,并联合学习对象间的深度顺序。 具体而言,方法分别从原始图像与加入人工遮挡物后的图像中提取对象表示,以这些表示构成的两组掩码计算训练损失;同时求解深度排序问题,使表示学习获得深度相关信息。摘要未给出掩码间的匹配方式、对比样本构造、损失公式或深度顺序监督来源,尚不能判断各部分如何协同,以及弱监督信号的具体范围。 作者报告,在若干模拟数据集、弱监督学习条件下,该方法的 AIS 准确性达到 SOTA 水平。摘要未提供数据集名称、具体指标、数值、数据划分及对照基线,因此这一结论目前仅能作为作者报告记录;实验协议、消融及统计信息尚未验证。 论文的主要研究对象是视觉对象分解、遮挡补全与深度排序,而非 EEG 或 BCI。其机制依赖图像中的对象、空间掩码和遮挡关系,现有材料不足以建立与神经信号任务的具体对应关系,故不据此推导 BCI 有效性或提出迁移复现实验。

阅读价值

值得关注其利用人工遮挡前后的对象掩码进行对比学习、并联合学习深度顺序的机制,但摘要所述弱监督 AIS 性能及各模块贡献仍需全文核验。

来源:OpenReview · Representation learning · openreview.net