跳到正文
OpenReview · State space models· Running Zhao; Luca Jiang-Tao Yu; Tingle Li; Zhihan Jiang; Chenwei Zhang; Chenshu Wu; Hang Zhao; Edith C.H. Ngai·· 2026-01-01精选AI 评分72

SPACE:利用 mmWave 无线电信号进行声学窃听的说话人适应方法

SPACE: Speaker Adaptation for Acoustic Eavesdropping Using mmWave Radio Signals

AI 导读

基于摘要分析。本文研究利用 mmWave 无线电信号恢复可懂语音的声学窃听问题,提出 SPACE,以应对说话人差异和低质量输入。其主要研究对象是无线电声学感知与语音恢复,并非 EEG 解码或 BCI。 SPACE 采用两阶段流程:先通过 Radio TransUNet 重建频谱图,再由神经声码器合成语音波形。针对说话人差异,系统使用说话人编码器提取说话人特征,并通过融合网络将这些特征作为频谱图重建的条件。针对低质量输入,Frequency Transformation Layer 利用各频率谐波之间的关联;神经声码器则从重建频谱图合成波形,避免使用受污染的相位信息。摘要未说明说话人特征来自何种输入,也未交代未见说话人的适应是否依赖额外语音或其他辅助数据。 作者报告,在包含多位不同说话人及未见说话人的评估场景中,SPACE 优于现有基于 mmWave 的方法。摘要没有提供数据集、说话人数、训练测试划分、对照方法名称或量化指标,因而尚不能判断改善幅度及适用边界;具体训练目标、实验协议、消融及统计信息尚未验证。 平台推测(待验证):条件化重建与将信号恢复、波形合成分离的设计,可作为研究低质量传感信号恢复的参考,但其有效性依赖语音谐波结构和声码器先验,不能直接推广到 EEG。若探索 EEG 到语音重建,需改造输入表征与条件特征提取模块,并核对声码器是否生成听似合理却与目标不符的内容;低信噪比、跨被试差异和小数据均可能使该假设失效。一个可检验的小实验是在固定 EEG 到语音任务及跨被试划分下,对比加入与不加入个体条件特征的重建模型,同时检查内容一致性而非仅听感。相关 EEG 工作尚未检索确认。

阅读价值

值得关注其以说话人条件化、频率谐波关联建模和神经声码器应对低质量 mmWave 语音恢复的机制,但未见说话人适应协议与量化结果,不能据此认定其对 EEG/BCI 有效。

来源:OpenReview · State space models · openreview.net