跳到正文
OpenReview · State space models· Fabio Pierazzi; Feargus Pendlebury; Jacopo Cortellazzi; Lorenzo Cavallaro·· 2020-01-01精选AI 评分83

问题空间中对抗机器学习攻击的有趣特性

Intriguing Properties of Adversarial ML Attacks in the Problem Space

AI 导读

基于摘要分析。本文研究软件等领域的对抗规避攻击:当特征空间与真实对象之间不存在清晰的逆映射时,如何生成实际可用、保持原有语义且能够逃避分类器的对象。核心贡献是问题空间攻击的形式化框架,以及基于该框架构建的 Android 恶意软件攻击,而非 BCI 或状态空间模型方法。 形式化框架覆盖可用变换、语义保持、对预处理的鲁棒性和可信性等约束,并分析特征空间与问题空间之间的关系。作者引入“副作用特征”(side-effect features),描述实现逆特征映射时伴生的特征变化;作者报告据此定义并证明了问题空间攻击存在的必要与充分条件,并用框架刻画多个领域的既有攻击。具体定义、证明假设与适用边界需查阅全文核对。 实验对象是来自 2017 和 2018 年的 170K 个 Android 应用。作者报告,新攻击能够规避其所称的先进恶意软件分类器及其强化版本,可规模化生成数千个真实且不显眼的对抗应用,平均生成一个应用仅需几分钟。摘要未提供具体规避率、数据划分、分类器配置或运行硬件,不能据此量化相对优势;实验协议、消融及统计信息尚未验证。作者表示向研究者发布代码与数据集,但具体访问条件及复现依赖尚未核对。 平台推测(待验证):可迁移的是“真实输入可实现性约束”的评估思路,而非恶意软件攻击操作。假设 EEG 模型使用提取特征,该框架可帮助检验特征扰动能否由合法的原始 EEG 变换实现,并在滤波等预处理后保留效果。需将软件语义约束改为信号、生理与采集条件约束;低信噪比、跨被试和通道差异可能使约束失效。一个可检验的小实验是在固定离线 EEG 测试集上,对比特征空间扰动与受约束原始信号扰动经同一预处理后的效果及信号合理性。已有 EEG 相关工作尚未检索确认。

阅读价值

其阅读价值在于将可实现变换、语义保持、预处理鲁棒性与可信性纳入问题空间攻击的统一形式化框架,可用于审视特征空间扰动是否对应真实可行的输入,但其在 EEG/BCI 中的适用性尚未验证。

来源:OpenReview · State space models · openreview.net