跳到正文
OpenReview · State space models· Ujjwal Upadhyay; Prerana Mukherjee·· 2021-05-21精选AI 评分71

利用潜空间投毒生成分布外对抗攻击

Generating Out of Distribution Adversarial Attack Using Latent Space Poisoning

AI 导读

基于摘要分析。本文研究图像分类器的对抗攻击,提出不直接扰动原始图像、而是操纵潜空间表示以生成分布外对抗样本的方法。其核心贡献是借助解耦变分自编码器 β-VAE,在保持感知质量的同时改变图像内在结构,并使重建样本被分类为指定目标标签。 机制上,作者先训练 β-VAE 建模数据的潜空间分布,再向潜表示注入从类别条件分布采样的噪声,并施加目标误分类约束。作者将这一机制与依赖目标网络梯度、直接搜索输入扰动的传统攻击区分开来,并将其解释为利用分类器对训练数据独立同分布(i.i.d.)的假设。摘要未说明噪声分布形式、约束求解方式或攻击所需的模型访问权限,不能据此判定整个流程完全不使用梯度。“潜空间投毒”在此指潜表示操纵,摘要并未明确描述训练集投毒。 作者报告,在 MNIST、SVHN 和 CelebA 上,生成样本能够欺骗针对 ℓ0、ℓ2 与 ℓ∞ 威胁模型设计、具有可证明防御的鲁棒分类器。摘要未提供攻击成功率、感知质量指标、数据划分或具体防御配置。应核对生成样本是否处于相应鲁棒保证的适用范围;攻击成功不能直接解释为推翻这些保证。实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 潜表示能够分离任务相关因素与非任务变化,这种潜空间攻击可能用于检验解码器对结构性分布偏移的敏感性。可复用的是潜表示噪声注入与定向误分类约束;需将图像生成器改造为适配 EEG 时序及通道结构的生成模型,并约束生理合理性和任务语义保持。低信噪比、跨被试差异、通道配置变化及小数据可能使潜因素无法可靠解耦。一个可证伪的小实验是在固定被试内划分和分类器下,比较潜空间攻击与直接输入扰动的定向攻击成功率,同时检查信号结构与原任务标签是否保持。原领域结果不等于 BCI 有效性,已有 EEG 相关工作尚未检索确认。

阅读价值

值得阅读之处在于通过 β-VAE 潜空间操纵构造定向误分类样本,可用于审视像素范数威胁模型下的防御边界,但攻击效果与感知质量仍需核对完整实验。

来源:OpenReview · State space models · openreview.net