跳到正文
OpenReview · State space models· Cong Li; Michael Georgiopoulos; Georgios C. Anagnostopoulos·· 2013-01-01精选AI 评分76

具有改进泛化界的多任务分类假设空间

Multi-Task Classification Hypothesis Space with Improved Generalization Bounds

AI 导读

基于摘要分析。本文研究多任务分类的假设空间与泛化保证,提出一个向量值函数的再生核希尔伯特空间(RKHS),扩展已有同类假设空间,并据此推导基于经验 Rademacher Complexity 的泛化界。 核心贡献是理论分析,而非状态空间模型或 EEG 方法。作者报告,相对于此前相关分析,所推导的泛化界得到改进,并将分析扩展到多核学习(MKL)设置;论文还讨论该假设空间与 Group-Lasso 型正则化的联系。摘要未给出核函数构造、任务间关系的具体表达、正则化形式或界成立的假设,因此尚不能判断改进依赖哪些约束,以及是否能转化为更好的预测性能。 作者报告,在若干基于 SVM 的多任务学习问题上,实验支持所推导界的质量及理论分析。摘要未提供数据集、样本规模、划分协议、对照基线或数值结果;实验协议、消融及统计信息尚未验证,不能据此宣称分类准确率提升。 平台推测(待验证):假设不同被试或会话可作为有关联的分类任务,这类假设空间与正则化分析可能用于研究 EEG 小样本条件下的任务共享与泛化约束。可复用的是核方法及多任务正则化思路,需要改造的是 EEG 特征、核函数和任务关系设定;低信噪比、通道不一致或任务关系较弱时,可能出现负迁移。一个可检验的小实验是在固定 EEG 特征和一致数据划分下,以被试作为任务,比较多任务核分类器与独立 SVM,并核对理论界与留出集误差的对应关系。此设想不是本文已验证的 EEG 结果,相关 EEG 工作尚未检索确认;复现前需取得全文以确认具体优化问题、界的计算条件与实验实现。

阅读价值

值得阅读的是作者将多任务分类的向量值 RKHS、基于经验 Rademacher Complexity 的泛化界与 Group-Lasso 型正则化联系起来,但界的改进条件及其对 EEG 小样本学习的适用性尚未验证。

来源:OpenReview · State space models · openreview.net