跳到正文

算法、任务与模态

Low-rank 最新动态

Low-rank 研究索引;按可核对的标签归档,不以热度评价质量。

306 条精选近 30 天 49 条共收录 380 条

更新

精选归档 · 第 16 页

1月1日周二第 301–306 条
  1. OpenReview · State space models75

    发现用于文本挖掘模型域适应的低秩共享概念空间

    基于摘要分析。本文研究文本挖掘模型如何从具有充足标注数据的源域适应到仅有无标注数据的目标域,提出发现低秩共享概念空间的框架,在缩小源域与目标域分布差异的同时,降低源域标注数据上的经验损失。 机制与理论:共享概念空间同时服务于分布对齐和源域预测任务。框架既可在原始特征空间中开展域适应,也可借助核技巧在再生核希尔伯特空间(RKHS)中进行。作者报告,其理论分析给出了与嵌入空间中的分布差异及源域经验损失相关的适应模型误差界;具体差异度量、低秩约束形式、优化方法和误差界成立条件尚未验证,不能据摘要补写。 实验依据:作者报告在 document classification 和 information extraction 两类文本挖掘任务上进行了实验,以展示框架有效性。摘要未提供数据集、划分、对照方法或具体指标数值,实验协议、消融及统计信息尚未验证,因此暂不能判断收益大小及适用边界。 平台推测(待验证):可检验的迁移假设是,在跨被试 EEG 域适应中,以有标注源被试和无标注目标被试构建低秩共享表示,可能缓解特征分布偏移。可复用的是低秩表示、分布对齐与源域监督联合建模的思路;需改造的是文本特征接口,以及适配 EEG 时空结构和通道差异的表示方式。该假设依赖两域具有可共享的任务相关结构;低信噪比、被试特异性、通道不一致及小样本可能使对齐损失压制判别信息或造成负迁移。一个小规模可证伪实验是:在固定跨被试划分下,仅用源被试标签和独立的目标域无标注适应数据训练,比较仅源域训练、低秩表示及加入分布对齐后的同一任务指标,并在隔离的目标测试集上评价。以上不是本文已验证的 EEG 结果,已有 EEG 相关工作尚未检索确认。

    阅读价值:值得核对其低秩共享表示中分布差异与源域监督损失的联合建模及误差界,但其对 EEG 跨被试域适应的价值尚未验证。

  2. OpenReview · State space models72

    输出空间中基于核的距离度量学习

    基于摘要分析。本文研究通用分类任务中的距离度量学习(Distance Metric Learning,DML),提出两种相关的核方法:先将数据非线性映射到输出空间,再在该空间中通过 Mahalanobis 度量计算距离,同时学习映射与度量。 核心机制是将距离学习放在可控维度的输出空间中。输出维度可直接设定,以便学习低秩度量;当输出空间为二维或三维时,学习到的映射还可用于数据可视化。摘要未说明两种方法的具体区别、核函数、监督形式、目标函数与优化过程,这些内容尚未验证。 作者报告,在一组分类任务上,所提方法相较传统及其他基于核的 DML 方法表现出优势。摘要未提供数据集名称、划分协议、对照方法名称或量化指标,因此无法判断优势幅度及适用范围;实验协议、消融及统计信息尚未验证,也不能据此推断 Cross-subject 或其他 EEG 协议下的效果。 平台推测(待验证):若 EEG 特征中的类别关系适合通过非线性映射表达,该机制可能用于构建低维、任务相关的样本距离,以应对高维特征下距离估计不稳定的问题。可复用部分是核映射与度量联合学习的思路;需要核对监督要求,并改造 EEG 特征构建、核选择及训练划分。低信噪比、通道变化、被试差异和小样本可能使学习到的距离偏向噪声或被试身份,而非任务类别。一个可检验的小实验是在固定 EEG 分类任务的 Within-subject 划分下,仅用训练集拟合映射和度量,以相同特征及分类器比较原始距离、线性 Mahalanobis 度量和本文方法,并考察输出维度变化的影响。该实验是迁移假设而非论文结果,已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的具体原因是其将非线性映射与输出空间中的 Mahalanobis 度量联合学习,并直接控制输出维度,为低秩度量和低维可视化提供统一思路;其 EEG 适用性尚未验证。

  3. OpenReview · State space models71

    用于 k-NN 分类的输出空间距离度量学习

    基于摘要分析。本文研究 k-NN 分类中的距离度量学习(DML),提出两种相关的核方法:将数据从原始空间非线性映射到输出空间,再在输出空间中使用 Mahalanobis 度量计算距离。核心贡献是联合学习映射与度量,并通过直接控制输出空间维度支持低秩度量学习。 机制上,非线性映射负责改变样本的表示空间,Mahalanobis 度量负责定义该空间内的距离;当输出空间为二维或三维时,映射还可用于数据可视化。摘要未说明两种方法之间的具体差异、核函数、目标函数、优化过程及新样本映射方式,这些实现条件尚未验证。 作者报告,在一组分类任务上,所提方法相较传统及其他核 DML 方法具有优势,但摘要未给出数据集、样本规模、划分协议、具体基线或指标数值,因此不能判断优势的幅度、稳定性及适用范围。实验协议、消融及统计信息尚未验证。 平台推测(待验证):若将 EEG 试次表示为固定维度特征,该方法可作为运动想象等分类任务中学习邻域结构的候选模块;可复用的是核映射、输出维度控制及度量学习机制,需适配的是 EEG 特征、标准化方式和跨被试评估协议。其监督需求与规模依赖尚待全文确认,低信噪比、通道差异及小样本条件可能使非线性映射过拟合,被试间分布变化也可能破坏所学距离。一个可检验的小实验是在固定 EEG 特征与相同被试内划分下,比较原始特征 k-NN、线性 Mahalanobis 度量及本文方法,并在训练数据内部选择核参数和输出维度,检验非线性映射是否带来稳定收益。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读其联合学习非线性输出空间映射与 Mahalanobis 度量、并直接控制输出维度的机制,但摘要不足以确认其比较优势或 EEG 迁移效果。

12月31日周一
  1. OpenReview · State space models80

    高维稀疏惩罚状态空间模型中的快速内点推断

    基于摘要分析。本文研究每个时间步仅有少量观测时,高维惩罚状态空间模型的快速后验推断,核心贡献是通过近似 Newton 方向计算最大后验(MAP)状态路径,并将方法扩展到非光滑稀疏与组稀疏先验。研究对象是通用状态空间推断,摘要讨论文本建模与神经科学应用,并未提供 EEG 或 BCI 验证结果。 方法要求状态先验与观测似然具有对数凹性,并具备支持快速矩阵—向量运算的特殊结构。作者采用二阶优化,通过一系列低秩更新构成高效的前向—后向计算流程,求取近似 Newton 方向。作者报告每次迭代的计算与内存成本均呈线性扩展;摘要未详细列出各维度的复杂度表达式,具体适用条件需核对全文。这一目标是 MAP 路径估计,不应等同于完整后验分布或不确定性估计。 作者报告形式化给出了算法适用条件,并证明稳定性与收敛性;可使用较广泛的状态先验而不改变所述线性复杂度,包括 Gaussian 先验,以及通过内点修改处理的非光滑稀疏和组稀疏先验。具体惩罚形式、数值实现、实验数据、运行时间对照、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 潜在状态估计可写成满足上述结构的对数凹状态空间问题,该机制可能用于少量通道观测下的高维稀疏状态恢复。可复用部分是低秩更新与前向—后向求解;需针对 EEG 改造观测模型、状态动力学和稀疏分组。低信噪比、跨被试观测差异及不准确的稀疏假设可能削弱恢复效果,小数据也可能限制模型参数估计。可先在已知潜在状态的模拟数据上改变噪声和观测通道数,与通用 MAP 优化器比较相同目标函数下的解误差、耗时和内存,再判断是否开展 EEG 实验。相关 EEG 工作尚未检索确认。

    阅读价值:值得阅读其以低秩更新和前向—后向计算降低高维状态路径 MAP 推断成本的机制,尤其是非光滑稀疏与组稀疏先验的内点处理;其对 EEG 的适用性尚未验证。

1月1日周六
  1. OpenReview · State space models70

    基于双线性模型的快速特征空间 MLLR 说话人自适应

    基于摘要分析。本文研究语音识别中适配数据有限时的说话人自适应,提出基于双线性模型的特征空间最大似然线性回归(FMLLR)方法,利用训练说话人的先验信息减少变换的自由参数,并将其纳入解码过程。 核心机制:摘要指出,常规 FMLLR 变换在适配数据不足时容易过拟合,甚至降低性能;对变换施加结构约束可支持快速适配。本文通过摘要所称的 Singular Vector Decomposition(SVD)分析训练说话人,构建双线性模型所需的先验信息,以限制待估计参数。具体分解对象、双线性参数化形式、优化目标及解码接入方式尚未验证,不能据摘要确定其实现细节。 实验依据:作者报告,在 Mandarin digital dataset 和 Mandarin voice search dataset 上的实验支持该算法的有效性,并称有限适配数据下仍能改善性能。摘要未给出适配数据量、数据划分、具体对照设置或量化指标;实验协议、消融及统计信息尚未验证。 平台推测(待验证):假设训练说话人中的共享变换结构可对应 EEG 被试间的部分特征差异,则“学习变换先验、减少个体适配参数”的思路可能用于小样本跨被试域适应。可复用的是受约束的特征变换思想,而语音解码与最大似然估计部分需按 EEG 任务及监督条件重新设计。其前提是训练被试能覆盖目标被试的主要变异;低信噪比、通道配置差异及小规模训练数据可能使先验不稳定或限制必要的个体差异。一个可检验的小实验是:固定 EEG 特征与分类器,在严格隔离目标被试测试数据的条件下,对比共享先验约束的线性适配、无约束线性适配及不适配,并考察不同目标被试适配样本量下的表现。此实验属于迁移假设检验,并非本文已验证结果;已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的是其利用训练说话人的先验约束 FMLLR 自适应参数、缓解少量适配数据下过拟合的具体机制,但其向 EEG 跨被试适应的可迁移性尚未验证。

1月1日周日
  1. OpenReview · State space models73

    谐波状态空间模型的高效 Kalman 平滑

    基于摘要分析。本文研究信号分析中的谐波概率模型,主要应用背景是声学建模;核心贡献是在其线性高斯状态空间表示下,为 Rauch-Tung-Striebel 平滑器的反向过程提出 rotation-corrected(旋转校正)低秩近似,以降低平滑推断的计算成本。 作者给出的常规平滑推断复杂度为 O(TH²),其中 T 为时间序列长度,H 为模型频率数量的两倍。近似方法以 S 表示近似秩,摘要将其复杂度记为“Q(TSH)”;该符号是否为排版问题尚未验证,不能直接改写为 O(TSH)。作者称该近似有效,但摘要未提供误差指标、运行时间、频率设置或对照实验,实验协议、消融及统计信息尚未验证。全文需重点核对旋转校正的具体形式、秩的选择方式及精度与计算量的权衡。 平台推测(待验证):若 EEG 分析任务使用显式谐波组成的线性高斯状态空间模型,该反向低秩近似可能用于降低长序列、多频率条件下的离线平滑开销;这一假设并不等于已证实的 EEG 或 BCI 效果。可复用部分是平滑器反向近似机制,需适配 EEG 观测矩阵、噪声模型及频率设置。低信噪比、非平稳频率和跨被试或通道差异可能影响模型适配;小数据下噪声与动力学参数估计的不稳定也需评估。一个可检验的小实验是在固定频率与参数的合成含噪谐波序列上,对比完整平滑器与不同秩近似的后验均值误差、运行时间及内存,再以固定协议的 EEG 片段检验适配性。已有 EEG 相关工作尚未检索确认。

    阅读价值:值得阅读的是对 Rauch-Tung-Striebel 平滑器反向过程采用 rotation-corrected 低秩近似的机制及其复杂度收益,但近似误差、实际加速和 EEG 适用性尚未验证。