HyperTransformer：面向监督与半监督少样本学习的模型生成

基于摘要分析。该研究面向监督与半监督少样本学习，提出基于 Transformer 的 HyperTransformer，直接根据支持样本生成 CNN 权重，使目标模型能够随具体任务调整，而非仅依赖固定、任务无关的通用嵌入。 核心机制是将任务空间的复杂性承载于高容量 Transformer，同时为单个任务生成较小的 CNN，从而解耦任务空间复杂性与单任务模型复杂性。作者报告，对小型目标 CNN，让任务信息调制全部模型参数比使用固定通用嵌入更有效；对较大模型，仅生成最后一层参数即可获得与当时先进方法相当或更好的结果，且该过程保持端到端可微。摘要未提供具体数据集、支持集规模、评价指标、对照配置或数值；半监督场景中无标签样本的使用方式，以及实验协议、消融及统计信息尚未验证。 平台推测（待验证）：其可迁移假设是，用少量带标签 EEG 支持样本生成任务特定分类模型，可能缓解固定表征难以适应被试差异的问题。可复用的是支持样本条件化权重生成机制；需改造的是 EEG 时空输入编码与目标 CNN，并明确任务如何对应被试、会话或类别。低信噪比、通道配置差异与支持样本过少可能使生成参数不稳定。可检验的小实验是在固定 Cross-subject 划分与相同支持集预算下，对比固定编码器加分类头、仅生成末层权重及生成全部权重，核对少样本适应收益与跨次抽样稳定性。以上并非论文已验证的 EEG 结果，已有 EEG 相关工作尚未检索确认。