跳到正文
OpenReview · Representation learning· Hung-Shin Lee; Yu Tsao; Shyh-Kang Jeng; Hsin-Min Wang·· 2020-01-01精选AI 评分77

用于音系配列口语语言识别的基于子空间的表示与学习

Subspace-Based Representation and Learning for Phonotactic Spoken Language Recognition

AI 导读

基于摘要分析。本文研究如何从语音话语中提取隐含的音系配列结构,用于语言验证及方言/口音识别;核心贡献是将音素后验概率序列转换为线性正交子空间,再以核方法或 subspace-based neural networks(SNNs)进行学习。 框架包含两个连续阶段。首先,将每段话语解码为音素后验概率向量序列,通过低秩矩阵分解或动态线性建模构造子空间。随后,使用支持向量机等核机器,或专门接收子空间样本的 SNNs 完成识别。SNNs 修改常规前向传播,使其符合子空间相似性的数学定义,旨在保证同一子空间得到相同输出。该设计关注子空间本身,而非某一种特定坐标表示;具体相似性函数、训练目标及实现细节尚未验证。 作者报告,在 NIST LRE 2007 的“General LR”测试中,相对于基于序列的 PPR-LM、PPR-VSM、PPR-IVEC,以及基于 lattice 的 PPR-LM,所提方法的等错误率分别取得最高 52%、46%、56% 和 27% 的相对降低,并非百分点下降。作者还报告,在 NIST LRE 2009 方言/口音识别任务中,SNN 系统优于上述四种基线,但摘要未提供具体指标。绝对等错误率、训练与测试划分、实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的假设是,子空间表示可能帮助 EEG 解码降低对序列长度及子空间基选择的依赖,而非直接复用语音识别系统。原方法依赖音素后验概率序列;用于 EEG 时,需要重新定义通道—时间或特征—时间矩阵,并选择子空间维度与监督任务。可复用候选是子空间构造与相似性学习,需改造的是输入表征和训练协议。低信噪比下的主导子空间可能主要反映伪迹,跨被试通道差异及小数据也可能导致不稳定。一个可证伪的小实验是在固定 EEG 数据划分下,对照原始特征分类与子空间分类,并检验同一子空间更换正交基后输出是否保持一致;性能与不变性应分别评估。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对其将可变长语音序列表示为子空间、并使网络输出遵循子空间等价性的机制;这一设计为序列表征提供了明确方法路径,但其对 EEG 的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net