跳到正文
OpenReview · Representation learning· Minh Tran; Mohammad Soleymani·· 2023-01-01精选AI 评分74

面向语音理解的隐私保护表征学习

Privacy-preserving Representation Learning for Speech Understanding

AI 导读

基于摘要分析。该研究针对既有隐私保护语音表征学习方法局限于单一应用领域的问题,提出对预训练编码器生成的语句级语音嵌入进行匿名化的框架,并在多种语音分类任务中评估隐私与任务效用。 核心机制是在预训练编码器输出的表征上训练 Transformer,估计同一语句由其他说话者说出时的表征;推理时将提取的表征转换为不同身份对应的表征,以降低说话者身份的可识别性。摘要未说明目标表征如何构造、是否需要跨说话者的同内容配对数据,以及具体损失和身份选择方式,这些实现条件尚未验证。 作者以 VoicePrivacy 2022 challenge 的语音匿名化方法为基线,通过说话者识别评估隐私,通过情感识别、抑郁分类和意图分类评估效用。作者报告,该方法在副语言任务的隐私与效用上优于基线,意图分类性能与基线相当。摘要未提供具体指标、数值、数据集及划分;实验协议、消融及统计信息尚未验证,因此不能据此量化隐私收益,也不能将降低身份可识别性等同于形式化隐私保证。 平台推测(待验证):其“改变身份相关表征、保留任务相关信息”的思路可能对应 EEG 中被试身份隐私与解码效用之间的权衡,但语音说话者转换并不直接等同于 EEG 的跨被试转换。可考察表征级转换模块,编码器、身份条件及训练目标则需按 EEG 数据重设;低信噪比、通道差异和小数据可能导致任务信息随身份信息一同丢失。一个可证伪的小实验是在固定 EEG 数据划分下,对比原始与转换后的表征,同时评估被试身份识别和目标任务解码,并明确身份识别攻击器的训练条件。已有 EEG 相关工作尚未检索确认。

阅读价值

该研究以预训练语音嵌入的身份转换同时评估隐私与任务效用,值得核对其跨任务匿名化收益及隐私评估协议,但摘要结果尚不能说明其对 EEG/BCI 的适用性。

来源:OpenReview · Representation learning · openreview.net