arXiv · 泛化与分布偏移· Dario Petri; Luca Mari·· 1 天前AI 评分64
不确定性评估:连接机器学习与测量科学
Uncertainty Evaluation: Bridging Machine Learning and Measurement Science
AI 导读
基于摘要分析。本文研究机器学习预测的可信度评估,借鉴测量科学从基于误差的方法向《测量不确定度表示指南》(GUM)框架演进的过程,提出通过系统识别、量化和传播不确定性贡献来评估单次预测结果的可信度。主要贡献是概念分析与框架倡议,摘要未提供可直接复现的算法或实验结果。 作者重点区分过程层面的质量与结果层面的质量,并讨论将机器学习不确定性划分为 aleatoric(偶然)和 epistemic(认知)两类的局限。作者认为,这种二分法与测量科学中随机误差、系统误差的传统区分类似,具有模型依赖性,因而不足以作为统一不确定性评估框架的基础。这是作者的论点,不应理解为已由实验确证的结论。 论文还讨论分布偏移、异常运行条件及不确定性评估有效性在两个领域中的概念对应。所倡导的路径不是仅对预测不确定性进行分类,而是辨识影响结果的不确定性来源,量化各项贡献,并研究其传播至最终结果的方式。摘要未说明具体估计器、传播规则、监督需求或验证指标;实验协议、消融及统计信息尚未验证,也不能据此断言作者未开展相关验证。 平台推测(待验证):这种结果层面的评估视角可能有助于审视 EEG/BCI 在跨被试、跨会话或异常信号条件下的单次预测可信度,但本文主要研究对象是通用机器学习与测量科学,摘要未建立具体 EEG 方法或验证路径,因此尚不能据此提出可复现的 BCI 算法方案。已有 EEG 相关工作尚未检索确认。进一步阅读需核对框架如何落实为可计算的不确定性贡献,以及如何检验其在分布偏移下的有效性。
来源:arXiv · 泛化与分布偏移 · arxiv.org