跳到正文
OpenReview · State space models· Helin Wang; Yuexian Zou; Wenwu Wang·· 2021-01-01精选AI 评分72

SpecAugment++:用于声学场景分类的隐藏空间数据增强方法

SpecAugment++: A Hidden Space Data Augmentation Method for Acoustic Scene Classification

AI 导读

基于摘要分析。本文研究声学场景分类(ASC)的数据增强,提出 SpecAugment++,同时在深度神经网络的输入空间与隐藏空间施加增强,以改善输入及中间特征表示的泛化能力;研究对象是声学场景,而非 EEG 或 BCI。 核心机制是在中间隐藏状态上遮蔽连续的频率通道块和时间帧块。作者认为,这可减少模型对局部高判别性特征的依赖,促使其利用更完整的特征。除零值掩码外,作者还考察了两种利用同一 mini-batch 中其他样本进行掩码的方法,以引入扰动、提升分类判别性;具体替换方式及增强位置尚未验证。相较摘要所述仅作用于输入空间的 SpecAugment 和 mixup,其主要区别是将增强扩展到中间表示。 作者报告,在 DCASE 2018 Task1 和 DCASE 2019 Task1 上,相对不使用增强的 CP-ResNet 基线,Accuracy 增益分别为 3.6% 和 4.7%,并优于此前的数据增强方法。摘要未明确这些增益是相对百分比还是百分点,也未提供数据划分、基线绝对 Accuracy 或比较细节,因此不能进一步换算或跨协议比较。实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 分类模型使用具有明确时间与频率轴的表示,隐藏空间时频块掩码可能缓解小数据条件下对局部线索的过拟合。可复用的是块掩码和批内样本扰动思路;需核对隐藏特征是否保留时频含义,并改造掩码尺寸与施加位置,不能将声学频率通道直接等同于 EEG 电极通道。低信噪比下遮蔽可能删除关键神经信号,跨被试或跨通道布局的批内替换也可能引入不匹配扰动。一个可检验的小实验是在固定跨被试划分及相同训练预算下,比较无增强、仅输入掩码与输入加隐藏掩码的 Accuracy,并检查不同掩码强度下的稳定性;这属于迁移假设,不是原论文结果。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对 SpecAugment++ 将时频块掩码扩展到中间特征的机制及其相对输入增强的收益,但其对 EEG 的适用性尚未验证。

来源:OpenReview · State space models · openreview.net