通过表征上的梯度解释进行模型去偏
Model Debiasing via Gradient-based Explanation on Representation
基于摘要分析。本文研究机器学习预测中的群体公平性问题,提出利用梯度解释扰动潜在表征的去偏框架,同时针对敏感属性及其代理属性,试图在不依赖完全解耦的情况下兼顾公平性与下游任务预测效用。 原问题是:通过解耦表征学习识别并删除与性别等敏感属性相关的潜在维度,可能因解耦不完整、遗漏代理属性而保留偏差,也可能丢失任务所需信息。本文先用梯度解释分别识别预测敏感属性和预测下游任务标签时模型关注的表征信息,再据此扰动潜在编码,引导下游模型训练。摘要未给出梯度计算对象、扰动规则、损失形式及代理属性的具体处理方式,这些机制细节尚未验证。 作者报告,该框架可结合解耦及非解耦表征学习方法,并在结构化与非结构化数据集上,相较既有方法取得更好的公平性—Accuracy 权衡。摘要未列出数据集名称、划分、基线、具体公平性指标或数值,实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 任务中存在需要控制的敏感属性,且具备相应属性标注或可训练的属性预测器,可假设这一机制能用于减少表征中的属性代理信息,同时保留任务信息;原领域结果并不构成 BCI 有效性的证据。可复用部分是双重梯度解释与表征扰动思路,需适配 EEG 编码器及公平性目标。低信噪比、小样本、跨被试及通道差异可能使梯度解释不稳定;当敏感属性与任务相关信息重叠时,扰动也可能损害预测效用。一个小规模检验是在固定跨被试划分下,对比相同编码器有无该扰动时的任务 Accuracy 与预先定义的群体公平性指标,并核对性能变化的不确定性。相关 EEG 工作尚未检索确认。
值得核对其如何用敏感属性与任务标签的梯度解释共同引导表征扰动,以缓解直接删除表征维度造成的信息损失;作者报告的公平性—Accuracy 权衡仍需结合全文协议验证。
来源:OpenReview · Representation learning · openreview.net