跳到正文

算法、任务与模态

Optimization 最新动态

Optimization 研究索引；按可核对的标签归档，不以热度评价质量。

230 条精选近 30 天 131 条共收录 267 条

更新

精选归档 · 第 12 页

1月1日周二第 221–230 条
  1. OpenReview · Representation learning75

    极简二值表示学习

    基于摘要分析。本文研究面向语义哈希的二值表示学习，探讨复杂二值优化、相似性度量或辅助生成模型是否是构建有效哈希模型的必要条件。作者提出以简单分类目标训练的方案，在任意骨干网络顶部增加两个全连接层，并在训练过程中满足二值约束，以生成利用数据语义的二值编码。 核心机制是将分类监督与二值表示学习结合，而不是依赖额外的交替更新步骤或辅助模型。作者称，该模型给出了数据样本与其语义之间 Information Bottleneck（IB）的下界，并可与多种 learning to hash 范式建立联系。摘要未提供二值约束的具体实现、梯度处理、分类损失形式或 IB 推导，因此尚不能判断这些环节的适用条件与优化代价。 作者报告，在 CIFAR-10、NUS-WIDE 和 ImageNet 的常规大规模基准实验中，该简单模型优于所比较的当时先进方法。但摘要未列出检索指标、编码长度、数据划分及具体基线，不能据此量化提升或比较不同协议。实验协议、消融及统计信息尚未验证；复现时需核对上述设置，以及骨干网络和分类监督的具体用法。 平台推测（待验证）：其潜在 EEG 对应点是利用语义监督学习紧凑二值表示，用于存储或检索，而非已证实的 BCI 解码改进。可复用的是分类目标与二值约束的组合，需改造的是 EEG 编码器及语义标签定义；原研究依赖带语义监督的视觉基准，其数据规模条件能否迁移至 EEG 尚不明确。低信噪比、跨被试差异、通道变化及小数据条件可能使二值化丢失判别信息。一个可证伪的小实验是在固定 EEG 数据划分和相同编码器下，对比连续表示与二值表示的检索质量、分类 Accuracy 和存储开销，并分别报告被试内与跨被试结果。已有 EEG 相关工作尚未检索确认。

    阅读价值：值得核对其如何用分类目标与训练期二值约束简化语义哈希学习，以及 Information Bottleneck 解释的成立条件；摘要中的性能优势尚需结合检索协议和对照设置验证。

  2. OpenReview · State space models73

    基于多通道非负矩阵分解的状态空间模型语音去混响快速收敛算法

    基于摘要分析。本文研究多通道语音去混响中状态空间模型的参数优化效率，提出一种省去 Kalman smoother 步骤的迭代算法，以降低传统期望最大化（EM）优化中的计算负担。研究对象是声学语音去混响，并非 EEG 解码或 BCI。 核心机制是在参数优化阶段固定潜在状态向量的部分充分统计量，据此构造原始状态空间模型对数似然的近似代价函数，并采用类似多通道非负矩阵分解的辅助函数方法优化参数。所需充分统计量由 Kalman filter 部分估计，算法交替执行 Kalman filter 与近似代价函数最小化，无需传统方法使用的 Kalman smoother。具体固定哪些统计量、辅助函数形式及近似成立条件尚未验证。 作者报告，在摘要所述实验中，该方法比传统方法更快地提高原始似然；在含噪环境下的语音去混响实验中能够有效降低混响。摘要未提供数据集、通道配置、噪声与混响条件、定量指标或运行时间，因此不能将似然提升更快直接等同于已证实的实时处理收益。实验协议、消融及统计信息尚未验证。 平台推测（待验证）：若 EEG 研究采用具有可估计潜在状态及充分统计量的状态空间模型，该优化思路可能用于检验能否减少平滑步骤的计算开销，而不是直接复用语音去混响模型。可考虑复用滤波与辅助函数优化框架，但观测模型、噪声假设及目标函数需按 EEG 数据重建；语音多通道结构与 EEG 通道混合并不等价，低信噪比、通道相关性和小数据可能使近似优化偏离有效解。一个可检验的小实验是在固定模型、初始化与数据划分下，对比传统 EM 与该近似优化的原始似然、运行时间及状态估计误差。相关 EEG 工作尚未检索确认。

    阅读价值：值得核对其以辅助函数近似优化替代 Kalman smoother 的计算收益，以及近似目标与原始似然之间的关系；摘要支持语音去混响用途，但尚未验证 EEG/BCI 适用性。

3月1日周四
  1. OpenReview · EEG73

    用于单试次 EEG 分类的鲁棒支持矩阵机

    基于摘要分析。本文研究测量伪迹、异常值及非标准噪声干扰下的单试次 EEG 分类，提出 robust support matrix machine（RSMM），在保留 EEG 矩阵表示的同时，将潜在干净信号恢复与分类器训练纳入统一框架。 核心机制是利用 EEG 样本内部的相关性，假设每个 EEG 矩阵可分解为潜在低秩干净矩阵与稀疏噪声矩阵，并基于恢复后的干净矩阵训练分类器。相较于摘要所述通过低秩约束利用矩阵内部相关性的已有分类器，RSMM 的主要区别是显式处理样本内部异常值，而非仅依赖输入信号本身。作者提出基于 alternating direction method of multipliers（ADMM，交替方向乘子法）的求解器；具体目标函数、损失形式、正则化设置及收敛条件尚未验证。 作者报告，在真实二分类 EEG 数据上的分类实验中，RSMM 优于所比较的先进矩阵分类器。摘要未提供数据集名称、被试数、矩阵构造方式、被试内或跨被试划分、对照方法名称及具体指标，因此目前不能判断性能优势的幅度或跨协议泛化能力。实验协议、消融及统计信息尚未验证。 阅读与复现时应重点核对低秩与稀疏分解的适用条件、超参数选择，以及训练和推理阶段分别如何恢复信号。平台推测（待验证）：若真实伪迹呈持续性、广泛通道污染而非稀疏异常，或有效 EEG 判别信息本身不符合低秩假设，恢复过程可能削弱分类信息。摘要将鲁棒运动想象 BCI 作为潜在应用方向，但尚不足以确认具体运动想象任务表现或在线 BCI 有效性。

    阅读价值：值得核对其将低秩信号恢复与矩阵分类器联合训练的机制，以及样本内稀疏异常假设对真实 EEG 伪迹的适用范围；摘要中的性能优势尚需结合实验协议验证。

1月1日周日
  1. OpenReview · State space models76

    用于学习非线性动力系统的灵活状态空间模型

    基于摘要分析。该研究针对非线性动力系统的学习，将状态转移函数与观测函数表示为基函数展开，并从数据中学习展开系数。核心贡献是利用与 Gaussian processes 的联系构造系数先验，以调节模型灵活性、抑制过拟合，同时设计基于序贯 Monte Carlo 的参数学习算法。 机制上，基函数展开承担非线性函数表示，系数先验则可视为正则化，用于在表达能力与泛化之间取得平衡。作者将这一设计与 Gaussian process state-space model 联系起来，但摘要未给出基函数类型、先验具体形式或二者的精确对应。学习算法用于估计展开系数及其他未知参数；作者称其具有理论保证，保证的条件与范围尚未验证。 作者报告，该方法在一个经典基准及真实数据上获得了有前景的结果。摘要未提供基准名称、数据规模、划分协议、对照方法或量化指标，因此尚不能判断收益大小及适用范围；实验协议、消融及统计信息尚未验证。复现需进一步核对基函数选择、先验设置、隐状态推断流程、序贯 Monte Carlo 的计算配置及参数学习细节。 平台推测（待验证）：若 EEG 时序中的潜在动态可由该类非线性状态空间模型近似，基函数表示与系数正则化可能有助于限制小数据条件下的模型复杂度；这是迁移假设，而非已证实的 BCI 效果。原方法依赖时序观测及隐状态建模，具体监督需求与数据规模要求尚未验证。可考虑复用函数展开、先验与学习框架，但需适配 EEG 的多通道观测、噪声特性及跨被试差异。低信噪比、通道配置变化和有限训练数据可能使隐状态难以辨识，或导致先验约束不合适。一个可证伪的小实验是在固定通道、固定划分的被试内 EEG 数据上，以留出时段的预测误差比较该模型、线性状态空间模型与弱正则化版本，检验非线性表示及先验是否带来稳定收益。已有 EEG 相关工作尚未检索确认。

    阅读价值：值得阅读其如何通过与 Gaussian processes 相联系的系数先验约束非线性状态空间模型的灵活性，以及配套序贯 Monte Carlo 学习算法；其对 EEG 动态建模的适用性尚未验证。

1月1日周五
  1. OpenReview · State space models75

    用于学习非线性动力系统的灵活状态空间模型

    基于摘要分析。该研究面向非线性动力系统学习，将状态转移函数和观测函数表示为基函数展开，并从数据中学习展开系数。其核心贡献是利用与 Gaussian processes 的联系构建系数先验，以调节模型灵活性、抑制过拟合，并设计基于 sequential Monte Carlo 的参数学习算法。 机制上，基函数展开承担非线性函数的表示，系数先验则可理解为正则化：作者希望保留展开形式的表达能力，同时改善泛化。学习算法用于估计展开系数及其他未知参数；摘要称其具有学习方面的理论保证，但保证的具体对象、成立条件和收敛性质尚未验证。基函数类型、先验形式、隐状态设定、训练流程与推理成本也需查阅全文。 作者报告，该方法在一个经典 benchmark 和真实数据上取得有希望的结果，但摘要未给出数据名称、划分协议、对照方法或量化指标，因而不能判断收益大小，也不能与其他协议下的结果直接比较。实验协议、消融及统计信息尚未验证。 平台推测（待验证）：若 EEG 的时序变化可由低维隐状态及非线性观测关系近似，该框架可能用于潜在动力学建模；这是假设，不是已证实的 EEG/BCI 效果。可复用部分是基函数表示、系数先验和序贯推断思路，需改造的是多通道观测关系、噪声假设及被试差异处理。低信噪比、通道变化和小数据可能使隐状态难以辨识，跨被试非平稳性也可能削弱泛化。一个可检验的小实验是在固定通道的单被试 EEG 上，采用互不重叠的训练与测试时间段，在匹配基函数规模和推断预算的条件下，对比带该先验与弱正则化版本的留出预测误差及稳定性。已有 EEG 相关工作尚未检索确认。

    阅读价值：值得阅读其如何将基函数展开、Gaussian processes 关联先验与 sequential Monte Carlo 学习结合，以兼顾非线性动力学表达能力和正则化；具体理论保证及实验收益仍需全文核对。

  2. OpenReview · State space models80

    非线性状态空间模型的结构化推断网络

    基于摘要分析。本文研究线性与非线性状态空间模型的高效学习，提出统一算法，联合训练生成模型与推断网络，覆盖以深度神经网络建模发射分布和状态转移分布的变体。 核心机制是使用循环神经网络参数化具有结构的变分近似，以逼近潜在状态的后验分布，同时学习生成模型与编译式推断网络（compiled inference network）。其方法重点在于推断端的后验结构，而非仅以神经网络替换生成端的分布。摘要未给出具体后验依赖关系、分布族、损失表达式或训练与推理流程，这些细节尚未验证。 作者报告在合成及真实数据集上展示了方法的可扩展性与适用性，并报告结构化后验近似带来了显著更高的留出数据似然。摘要未提供数据集名称、划分方式、对照基线、具体数值及统计检验信息，因此不能判断收益大小或直接比较不同实验协议；实验协议、消融及统计信息尚未验证。 平台推测（待验证）：若 EEG 序列可由潜在状态及其转移过程描述，该机制可能用于非线性潜在动态建模和时序推断，但原领域的似然提升不等于 BCI 解码效果提升。可考虑复用状态空间生成模型与结构化推断思路，需针对 EEG 的通道观测、噪声和序列切分改造发射模型与训练流程；摘要未说明是否依赖任务标签或需要多大数据规模。低信噪比、跨被试分布差异、通道变化及小数据可能使模型拟合非任务相关动态。一个可检验的小实验是在固定被试内划分与相同生成模型下，对比结构化和非结构化变分近似，分别评估留出似然及固定下游解码器的表现，检验生成建模收益是否转化为任务收益。已有 EEG 相关工作尚未检索确认。

    阅读价值：值得阅读其如何用具有结构的变分后验联合学习推断网络与状态空间生成模型；作者报告该近似提升了留出数据似然，但其对 EEG 潜在动态建模的价值尚未验证。

1月1日周四
  1. OpenReview · State space models72

    用于声学回声削减与去混响的变分贝叶斯状态空间模型

    基于摘要分析。研究针对 A/D 与 D/A 转换器不同步时的语音去混响、声学回声削减和降噪问题，提出基于变分贝叶斯的联合优化方法，利用两个状态空间模型分别描述时变回声滤波器和无噪多通道语音信号。 核心机制是将转换器异步条件下的声学回声削减滤波器视为时变状态向量；第二个模型则将无噪多通道语音信号视为状态向量，使去混响滤波器能够在含噪环境中更新。作者通过变分贝叶斯框架优化这两类模型，交替执行两个基于 Kalman smoother 的参数优化阶段。具体状态转移、观测模型、概率分布与优化目标尚未验证。 作者报告，在真实远程会议室录制的数据上，即使 A/D 与 D/A 转换器异步，所提方法也比作者此前的传统方法更有效地削减声学回声、语音混响和背景噪声。摘要未提供数值指标、数据规模或划分方式，实验协议、消融及统计信息尚未验证；因此无法判断收益大小及不同噪声条件下的稳定性。 平台推测（待验证）：迁移假设是，时变干扰参数与潜在干净多通道信号的联合状态估计，可能用于 EEG 非平稳伪迹抑制。原方法依赖多通道时序观测及声学回声、混响的结构假设，具体参考信号和监督需求需查正文；可复用的是双状态建模与交替平滑优化思路，需改造的是 EEG 观测模型、伪迹动力学及通道耦合关系。低信噪比、跨被试差异、通道变化和小数据可能导致状态估计不稳定，或把任务相关脑活动误当作干扰。一个可证伪的小实验是在固定被试内划分的 EEG 上注入已知时变伪迹，对比单状态与双状态估计，并同时检查伪迹残留和原始 ERP 波形保真度。已有 EEG 相关工作尚未检索确认。

    阅读价值：值得阅读的是以两个状态空间模型及交替 Kalman 平滑优化联合处理时变回声与含噪多通道信号的机制，其对 EEG 伪迹建模的可迁移性尚未验证。

12月31日周六
  1. OpenReview · Representation learning73

    面向计算代价高昂的约束优化问题的代理模型辅助模因协同进化算法

    基于摘要分析。该研究针对目标函数与约束条件均具有高计算代价的优化问题，提出代理模型辅助的模因协同进化框架，旨在提高进化优化的效率；主要研究对象是通用约束优化，而非 EEG 解码或 BCI。 机制上，框架以合作式协同进化为骨干，并引入随机问题分解，以处理变量之间的相互依赖，减少对人为指定分解方式的依赖；同时提出约束的多目标排序策略。摘要未说明代理模型类型、模因搜索的具体操作、随机分解的更新方式，以及约束排序如何参与候选解选择，这些实现细节尚未验证。 作者报告在一系列常用基准问题上开展了实验，以验证算法，但摘要没有给出基准名称、变量规模、评估预算、对照方法或定量指标，因此尚不能判断效率增益、约束可行性表现及其稳定性。实验协议、消融及统计信息尚未验证，复现前需核对真实目标与约束的评估次数如何计入预算。 平台推测（待验证）：若 EEG 研究中的超参数或通道组合优化同时包含昂贵训练评估与明确约束，该框架可能具有借鉴价值。其依赖可反复评估的目标、约束及可分解的决策变量；可考虑复用代理辅助搜索与协同进化机制，但需按连续或离散变量类型改造分解和搜索操作，并明确约束定义。低信噪比、小数据及跨被试差异可能使验证目标不稳定，进而误导代理模型；变量强交互也可能削弱随机分解的收益。一个可检验的小实验是在固定 EEG 数据划分和相同真实评估预算下，对比该框架与不使用代理模型的搜索方法，记录验证目标、约束满足情况及独立测试表现。相关 EEG 工作尚未检索确认。

    阅读价值：值得核对其随机问题分解与约束多目标排序如何协同减少昂贵评估，但摘要未提供定量结果，效率收益及适用条件尚未验证。

1月1日周六
  1. OpenReview · State space models74

    非线性状态空间模型的系统辨识

    基于摘要分析。本文研究一般非线性动态系统在状态空间形式下的参数估计，核心贡献是在 Maximum Likelihood（ML，最大似然）框架下推导 Expectation Maximisation（EM，期望最大化）算法，将隐状态估计与模型参数优化结合起来。 机制上，E 步需要求解非线性状态估计问题，并获得隐状态的平滑估计；作者采用 particle smoother（粒子平滑器）处理这一环节。摘要称其能够提供任意好的估计，但这一表述的适用条件、粒子数量与近似误差尚未验证。M 步使用标准数值优化技术求解，具体目标形式、优化器及收敛条件需核对全文。作者报告，仿真示例展示了所提方法的有效性；摘要未提供仿真系统、样本规模、对照方法或定量指标，实验协议、消融及统计信息尚未验证。 平台推测（待验证）：该方法可能用于 EEG 非线性潜在动态过程的参数辨识，而非直接构成 BCI 解码算法。迁移假设依赖可建立的隐状态转移模型、EEG 观测模型及噪声假设；摘要未明确原方法对监督信息和数据规模的要求。可复用的是 EM 求解框架与粒子平滑环节，需改造的是状态定义、观测映射和跨被试参数处理。低信噪比、多通道带来的状态维度增长，以及小数据下的参数可辨识性，均可能使估计不稳定或计算成本过高。 一个可证伪的小实验是：先在具有已知潜在动态与噪声水平的合成 EEG 观测上，比较该方法与线性状态空间基线的参数恢复误差及独立留出序列预测表现，并检查结果对粒子数量和初始化的敏感性；该实验只能检验建模假设，不能证明 BCI 有效性。相关 EEG 工作尚未检索确认。

    阅读价值：值得阅读的是其将非线性状态空间模型的最大似然参数估计分解为粒子平滑与数值优化的 EM 求解路径；用于 EEG 动态建模的价值仍需独立验证。

1月1日周五
  1. OpenReview · State space models73

    混合线性/非线性状态空间模型的参数辨识

    基于摘要分析。本文研究含条件线性高斯子结构的混合线性/非线性状态空间模型，主要贡献是在最大似然框架下推导用于参数辨识的 expectation maximization（EM）型算法。次要贡献是扩展已有 Rao-Blackwellized particle smoother（RBPS），使其能够处理文中研究的完全相互连接模型。 核心机制是利用模型中的条件线性高斯结构，求解参数估计过程中涉及的非线性隐状态平滑问题。作者称该问题可通过 RBPS 高效求解；从方法机制看，Rao-Blackwellization 利用可条件解析处理的子结构，减少需要粒子近似的部分。不过，摘要未给出具体状态分解、相互连接方式、EM 更新公式或平滑器实现，不能据此确定适用的全部模型类别及计算收益。 摘要未提供数据集、样本规模、对照方法或定量结果，因此尚不能判断参数估计精度、收敛表现及相对已有 RBPS 的优势幅度。实验协议、消融及统计信息尚未验证。复现前需取得全文，核对模型假设、参数可辨识性、粒子数、初始化、停止条件及计算成本。 平台推测（待验证）：若 EEG 动态模型能明确分解为非线性潜状态与条件线性高斯观测或子状态，该方法可能用于联合估计隐状态和模型参数；原论文研究的是通用状态空间模型，并非已验证的 EEG/BCI 方法。可复用的是 EM 参数估计与 RBPS 平滑框架，需要改造的是 EEG 状态定义、观测关系及噪声模型。低信噪比、非高斯伪迹、跨被试差异、通道变化和小数据可能使结构假设失效或导致参数辨识不稳定。一个可检验的小实验是在参数已知、满足该结构的模拟 EEG 时序上，对比 RBPS 与未利用该结构的粒子平滑器，在相同计算预算下评估参数恢复误差和状态估计误差，再逐步加入噪声模型失配。已有 EEG 相关工作尚未检索确认。

    阅读价值：该文值得关注之处是将条件线性高斯子结构用于最大似然参数辨识，并扩展 Rao-Blackwellized particle smoother 以处理完全相互连接的模型；其对 EEG 潜状态建模的适用性尚未验证。