跳到正文
OpenReview · Representation learning· Chun-Hsien Lin; Wei-Jia Huang; Bing-Fei Wu·· 2021-01-01精选AI 评分71

用于姿态不变人脸识别的深度表征对齐网络

Deep representation alignment network for pose-invariant face recognition

AI 导读

基于摘要分析。本文研究非受控场景中姿态变化对人脸识别的影响,提出 deep representation alignment network(DRA-Net),将侧脸深度表征对齐到正脸表征,以缩小姿态造成的同一身份内部差异;主要研究对象是人脸图像,而非 EEG 或 BCI。 DRA-Net 由去噪自编码器(DAE)与深度表征变换(DRT)模块组成,采用端到端训练。按摘要描述,DAE 用于恢复大姿态角下不可见面部区域的深度表征,DRT 再将恢复后的侧脸表征变换至近正脸姿态。方法还使用 cosine loss 与成对训练,缩小正脸和侧脸表征间的差距、降低类内变化。具体损失公式、配对构造及监督要求尚未验证。 作者报告,在 LFW、YTF、Multi-PIE、CFP、IJB-A 和 M2FPA 基准上,DRA-Net 优于所比较的方法,尤其在大姿态角条件下;摘要未提供具体指标、数值、数据划分或基线配置,无法据此量化增益。实验协议、消融及统计信息尚未验证。 平台推测(待验证):可检验的迁移假设是,将“受扰动表征恢复—参考域对齐”用于 EEG 通道缺失条件下的表征学习。可复用的是表征恢复与变换的分工,需改造图像编码器、缺失模式及训练配对;原方法依赖正脸与侧脸配对所提供的参照关系,其在 EEG 中的可获得性仍需核对。低信噪比、跨被试差异及小数据可能使恢复模块生成不可靠表征,或使对齐损失抹去任务相关信息。一个小规模验证可在固定被试内划分下模拟通道缺失,对比无对齐、仅恢复及恢复加对齐,并检查任务性能与表征偏移。此方案不是原论文结果,相关 EEG 工作尚未检索确认。

阅读价值

值得关注其将不可见区域表征恢复与姿态表征变换分开的对齐机制,但摘要中的性能优势尚需结合完整评估协议核对,不能据此推断 EEG/BCI 有效性。

来源:OpenReview · Representation learning · openreview.net