跳到正文
OpenReview · Representation learning· Ming Shao; Yizhe Zhang; Yun Fu·· 2018-01-01精选AI 评分73

用于姿态不变人脸表示学习的协同随机人脸引导编码器

Collaborative Random Faces-Guided Encoders for Pose-Invariant Face Representation Learning

AI 导读

基于摘要分析。本文研究姿态变化导致测试人脸与注册人脸外观差异显著时,如何学习具有身份判别力的表示,提出 collaborative random faces (RFs)-guided encoders,以监督自编码器学习对姿态变化更稳健的身份特征。 核心机制是将传统自编码器的重建目标替换为按身份分配的随机信号(文中称 RFs),引导同一身份不同姿态的人脸学习身份相关表示。框架进一步结合深度卷积网络人脸描述子,并联结不同 RFs 所学习的判别性身份特征,形成增强表示。摘要未给出随机目标的具体生成方式、损失形式及特征融合实现,相关细节尚未验证。 作者在 Multi-PIE 上开展人脸身份识别实验,在 labeled faces in the wild 和 YouTube Face 上开展人脸验证实验,以识别率、验证准确率及 ROC 曲线评估。作者报告该系统能够较好地处理姿态变化,但摘要未提供具体数值、划分和对照结果,因此无法量化其收益;实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的候选机制是利用类别专属随机监督目标,约束同类样本在干扰变化下形成一致表示,而非直接复用人脸描述子。该机制依赖身份标签及同一身份的多姿态样本;用于 EEG 任务分类时,需要改为任务类别目标并替换输入编码器,不能直接将被试身份监督视为跨被试任务泛化。EEG 的低信噪比、通道差异及小样本可能使随机目标拟合不稳定,或使模型保留被试特征。一个可检验的小实验是在固定跨被试划分和相同 EEG 编码器下,对比随机类别目标与常规分类监督,核对任务性能及不同随机种子的波动。上述路径仅是假设,已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对的是以身份专属随机目标替代自编码器重建目标、再融合多组随机目标所学特征的监督表示机制;其对姿态变化的效果由作者报告,能否用于 EEG 尚未验证。

来源:OpenReview · Representation learning · openreview.net