CDRL:用于面部动作单元检测的对比解耦表征学习方案
CDRL: Contrastive Disentangled Representation Learning Scheme for Facial Action Unit Detection
基于摘要分析。该研究针对面部动作单元(AU)检测中动作信息与个体面部属性纠缠、导致同类别表征不一致的问题,提出 Contrastive Disentangled Representation Autoencoder(CDAE),通过动作与身份解耦及对比学习构建具有身份不变性的动作表征。研究对象是面部图像,而非 EEG 或 BCI。 核心机制是将面部图像分解为随时间变化的动作成分与相对稳定的面部属性成分,分别映射至面部动作子空间和动作无关的身份子空间。对比学习方案进一步将动作特征映射到连续潜变量空间,形成具有语义信息的 AU 流形,以减轻被试间表征错位并降低动作特征维度。摘要未交代正负样本构造、监督信号、具体损失及时间信息的使用方式,这些实现条件尚未验证。 作者报告,在 BP4D 和 DISFA 基准上,CDAE 的 AU 检测表现优于或可比于既有方法;摘要未提供具体指标、数值、数据划分及对照配置,因此不能据此量化提升,也不能确认其跨被试泛化幅度。实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 中任务相关活动与个体差异能够部分分离,动作/身份双子空间的思路可能对应跨被试解码中的任务信息保留与被试差异抑制。可复用的是解耦表征与对比约束的设计思路,需改造输入编码器、样本配对规则及身份约束;面部属性相对稳定的假设不能直接套用于非平稳 EEG,低信噪比、通道差异和小样本还可能使身份抑制同时移除任务信息。一个可证伪的小实验是在固定跨被试划分与相同编码器下,对比基础模型、仅解耦、仅对比学习及二者结合的任务表现,并检查身份可预测性是否下降、任务信息是否保留。上述迁移尚无本材料中的 EEG 证据,已有 EEG 相关工作尚未检索确认。
值得核对其身份与动作解耦及对比学习如何缓解被试间表征错位,但摘要尚不足以确认各模块的独立贡献或其对 EEG 的适用性。
来源:OpenReview · Representation learning · openreview.net