跳到正文
OpenReview · Representation learning· Valentyn Melnychuk; Dennis Frauen; Jonas Schweisthal; Stefan Feuerriegel·· 2026-02-03精选AI 评分79

用于估计因果量的正交表征学习

Orthogonal Representation Learning for Estimating Causal Quantities

AI 导读

基于摘要分析。本文研究高维观测数据中的因果量估计,提出连接表征学习与 Neyman-orthogonal learners 的统一框架 OR-learners,旨在兼顾表征学习的实践优势与因果估计的理论保证,而非提出 EEG 解码方法。 核心问题是:端到端表征学习虽然实践表现良好,但其 quasi-oracle efficiency(准预言机效率)尚不明确;两阶段 Neyman-orthogonal learners 具有相应的渐近最优性,却未显式利用表征学习的优势。作者分析何时表征能够改善正交学习器,以及表征平衡约束(balancing constraint)能否带来额外收益。 作者报告,在低维流形假设下,OR-learners 可严格改善标准 Neyman-orthogonal learners 的估计误差;同时,平衡约束需要额外的归纳偏置,不能普遍弥补端到端方法缺乏 Neyman-orthogonality 的问题。这些结论带有适用条件,不应理解为任意降维或表征平衡都能提升因果估计。摘要提到理论与实证分析,但具体因果目标、模型实现、损失形式、数据集、对照设置、误差指标、消融及统计信息尚未验证。 平台推测(待验证):若研究目标是利用高维 EEG 协变量估计干预效应,而非单纯分类,低维表征与正交估计的结合可能值得考察;其前提包括适用的因果识别假设及低维结构。可复用的是表征与正交学习器的组合思路,需改造 EEG 表征及被试、会话划分。低信噪比、小样本或跨被试变化可能使表征丢失重要混杂信息。一个可检验的小实验是在具有已知因果真值的合成高维信号上,比较原始特征正交学习器与 OR-learners,并改变噪声和流形假设的满足程度,检验估计误差是否改善。已有 EEG 相关工作尚未检索确认,原领域结果不构成 BCI 有效性的证据。

阅读价值

值得阅读的是作者对表征学习何时改善 Neyman-orthogonal learners 的条件分析,以及对 balancing constraint 不能普遍替代 Neyman-orthogonality 的理论边界说明;具体实证支持尚待全文核对。

来源:OpenReview · Representation learning · openreview.net