跳到正文
OpenReview · Representation learning· Mohammed Hassanin; Ibrahim Radwan; Salman H. Khan; Murat Tahtali·· 2022-02-01精选AI 评分73

面向多标签图像识别的判别性表征学习

Learning discriminative representations for multi-label image recognition

AI 导读

基于摘要分析。本文研究多标签图像识别中的类别特征混合问题,提出统一深度网络:先解耦图像中不同类别对应的特征,再在输出空间增大类间距离、减小类内差异,以学习类别可区分的表征。原研究对象是计算机视觉图像,而非 EEG 或 BCI。 核心机制是以所提出的损失约束整个网络,使特征学习不只停留在图像级判别,还能处理一幅图像内多个类别之间的差异。该机制依赖多标签图像及其类别监督;具体解耦操作、距离定义、损失形式与训练配置尚未验证。作者报告,将其用于 ResNet-101 可显著改善性能,并认为该判别特征学习模块可接入多种多标签方法。 作者报告在 COCO-2014、VOC2007 和 VOC2012 上进行了实验,并在大规模 COCO 数据集上相较所比较的先进方法取得“3.5%”的提升;摘要未明确该数值对应的指标、相对百分比或百分点,也未给出具体基线与数据划分,因此不能据此作定量横向比较。实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 任务确实具有同时存在的多个标签,类别特征解耦与距离约束可能用于缓解共享信号成分造成的标签混淆;这是假设,并不意味着其适用于常见单标签 MI 分类。可考虑保留类别级表征与判别约束,将图像编码器替换为 EEG 时序编码器,但低信噪比、标签共现相关性、通道差异和小样本可能使解耦不稳定,或误删共享神经成分。一个可证伪的小实验是在具有真实多标签标注的 EEG 数据上,固定编码器与跨被试划分,对照基础多标签损失、加入解耦、再加入距离约束的表现,并检查逐标签效果及跨随机种子的稳定性。已有相关 EEG 工作尚未检索确认。

阅读价值

值得核对其类别特征解耦与类间、类内距离约束如何协同改善多标签识别,但摘要中的增益指标与比较协议尚未验证,其对 EEG 的适用性也未获证实。

来源:OpenReview · Representation learning · openreview.net