跳到正文
OpenReview · Representation learning· Jiaming Chu; Lei Jin; Junliang Xing; Jian Zhao·· 2023-01-01精选AI 评分77

UniParser:基于统一相关性表示学习的多人解析

UniParser: Multi-Human Parsing with Unified Correlation Representation Learning

AI 导读

基于摘要分析。UniParser 研究图像中的多人解析,即同时区分不同人体实例并识别细粒度人体部位类别。论文针对既有方法将实例信息与类别信息交由不同分支、采用不同输出格式所产生的冗余,提出统一相关性表示学习框架,而非 EEG 或 BCI 方法。 核心机制包含三个方面:在余弦空间中学习实例特征与类别特征;将各模块输出统一为像素级分割结果,并使用同质标签与辅助损失监督两类特征;通过联合优化融合实例表示与类别表示。摘要未给出同质标签的具体构造、辅助损失公式及联合优化流程,这些实现细节尚未验证。 作者报告,统一实例级与类别级输出可避免人工设计的后处理,并在 MHPv2.0 上取得 49.3% AP、在 CIHP 上取得 60.4% AP,且优于其比较的现有方法。摘要未说明数据划分、AP 的具体计算设置、对照方法及训练配置,因此这些数值仅能作为对应数据集上的作者报告,不能据此进行跨协议比较;实验协议、消融及统计信息尚未验证。 复现时需核对统一标签如何同时编码实例与部位类别、联合优化如何协调两类表示,以及避免后处理的适用条件。作者表示将发布源代码、预训练模型与在线演示,但所给材料不能确认其实际发布状态。该方法依赖像素级实例与类别监督,尚无材料支持其对 EEG/BCI 的直接价值;相关 EEG 工作尚未检索确认,不将视觉分割结果外推为神经信号效果。

阅读价值

值得核对其如何以统一相关性表示和联合优化整合实例身份与细粒度类别信息,尤其是避免人工设计后处理的实现条件;摘要中的性能结论仍需结合完整评估协议验证。

来源:OpenReview · Representation learning · openreview.net