跳到正文
OpenReview · Representation learning· Shalev Shaer·· 2023-01-09精选AI 评分80

通过学习提高条件随机化检验的功效

Learning to increase the power of conditional randomization tests

AI 导读

基于摘要分析。本文研究 model-X conditional randomization test(条件随机化检验)的模型训练目标:常见做法以预测准确性训练模型,再用模型构造检验统计量,但预测更准未必意味着检验功效更高。作者提出新的模型拟合方案,通过旨在增大条件独立性违背程度所对应检验统计量的代价函数,使训练目标更直接地服务于检验功效。 该方法的主要研究对象是条件独立检验与特征发现,而非 EEG 解码或 BCI。model-X 框架用于识别在给定其他特征后仍与响应变量相关的特征,并控制 I 类错误率;本文的切入点是改变预测模型的拟合目标,而不是仅以预测性能作为检验效能的替代指标。摘要未提供损失公式、条件重采样机制、所需条件分布的获取方式,以及训练与检验数据如何划分,相关实现与有效性条件尚未验证。 作者报告,在合成和真实数据实验中,将所提损失与 lasso、elastic net、deep neural networks 结合,能够持续增加正确发现的数量,同时维持 I 类错误率控制。摘要未提供数据集名称、样本规模、具体效应量或数值结果,实验协议、消融及统计信息尚未验证,尚不能判断收益在何种特征相关结构和样本规模下最稳定。 平台推测(待验证):若 EEG 研究的目标是识别控制其他变量后仍与任务响应相关的特征,该训练目标可能具有借鉴价值,但不能据此推断其改善 BCI 解码性能。可复用的是检验导向的损失设计;需改造和验证的是 EEG 时空相关特征的条件采样、被试依赖结构及数据划分。低信噪比、通道共线性和小样本可能使条件分布估计不准,影响检验校准。一个可证伪的小实验是在保留 EEG 特征相关结构、注入已知条件关联的半合成数据上,以相同基模型比较常规预测损失与该损失,并同时检查经验 I 类错误率和检验功效。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对其将训练目标从预测准确性转向条件独立检验功效的具体损失设计,以及功效提升与 I 类错误控制各自依赖的条件。

来源:OpenReview · Representation learning · openreview.net