基于松弛空间结构对齐的少样本生成模型适应
Few Shot Generative Model Adaption via Relaxed Spatial Structural Alignment
基于摘要分析。本文研究图像 GAN 的少样本域适应:从在大规模源域数据上训练的 GAN 出发,用少量目标域样本适应生成模型。针对少于 10 个样本的极少样本设置中容易出现的过拟合与生成坍塌,作者提出松弛空间结构对齐方法 RSSA,以约束适应过程中的生成图像结构。 核心机制是跨域空间结构一致性损失,由自相关一致性损失与扰动相关一致性损失组成,用于对齐源域和目标域合成图像对的空间结构信息。为放松跨域对齐,作者还将生成模型的原始潜在空间压缩到一个子空间,并使该子空间生成的图像对更接近。摘要未给出相关性计算、扰动构造、子空间压缩方式或损失权重,不能据此确定具体实现。 作者报告,定性与定量实验显示 RSSA 在少样本设置下持续优于所比较的当时先进方法;但摘要未提供数据集、具体样本配置、评价指标、数值或基线名称,因此比较幅度与适用范围尚未验证。实验协议、消融及统计信息尚未验证。摘要提供了源码地址,但代码内容、运行依赖及预训练模型可用性尚未核验。 平台推测(待验证):若研究对象是具有固定通道布局的 EEG 头皮地形图生成,跨域结构约束可能为小样本目标被试适应提供正则化思路;这不等同于已验证的 EEG 或 BCI 效果。可复用的是相关结构约束思想,需改造的是通道空间表示、扰动定义及源域与目标域的对应关系。低信噪比、通道布局差异和真实被试差异可能使结构对齐保留伪迹或压制有用变化。一个可检验的小实验是:固定通道布局与目标训练样本,在独立目标测试数据上比较直接微调与加入该约束后的生成质量、多样性及结构保真度。相关 EEG 工作尚未检索确认。
值得核对 RSSA 如何以跨域空间结构一致性约束缓解极少样本 GAN 适应中的过拟合与生成坍塌,但其比较优势及 EEG 迁移价值尚未验证。
来源:OpenReview · State space models · openreview.net