具有可证明效率保证的联邦主动多任务表征学习
PROVABLY EFFICIENT FEDERATED ACTIVE MULTI-TASK REPRESENTATION LEARNING
基于摘要分析。本文针对源任务与目标任务数据均有限时的多任务表征学习,提出采用线性表征的主动学习方法,通过估计各源任务对目标任务的相关性,自适应分配采样,以提高数据利用与计算效率。 核心机制是基于自适应采样的交替投影梯度下降(GD)与最小化算法:迭代估计源任务相关性,并依据估计结果从各源任务采样。作者给出算法的收敛保证以及样本复杂度、时间复杂度分析;具体假设、复杂度表达式、采样预算和优化目标尚未验证。标题包含联邦学习,但摘要未说明客户端通信、聚合流程或隐私机制,不能据此补充联邦实现细节。 作者报告在合成数据和真实 MNIST-C 数据上开展数值实验,并与四种基准算法比较。摘要未提供具体指标、数值结果、任务构造或数据划分,因此暂不能判断优势幅度及适用范围;实验协议、消融及统计信息尚未验证。 平台推测(待验证):假设不同 EEG 被试或会话可作为源任务与目标任务,相关性驱动的采样可能用于缓解跨被试或跨会话迁移中标注预算有限的问题。可复用的是任务相关性估计与采样分配框架;需改造的是 EEG 表征、任务定义及采样与标签获取接口,并核对理论是否依赖共享线性结构。低信噪比、通道不一致和小样本可能使相关性估计不稳定,导致预算偏向无益源任务。一个可检验的小实验是在固定目标任务训练数据、总标注预算和独立测试集的跨被试设置下,比较自适应源任务采样与均匀采样,检验收益是否稳定。以上不是已验证的 EEG/BCI 结果,已有 EEG 相关工作尚未检索确认。
值得阅读其按源任务与目标任务相关性自适应分配采样的机制及收敛、样本和时间复杂度分析,但理论适用条件与实验优势尚需核对全文。
来源:OpenReview · Representation learning · openreview.net