跳到正文
OpenReview · Representation learning· Xizhan Gao; Sijie Niu; Dong Wei; Xingrui Liu; Tingwei Wang; Fa Zhu; Jiwen Dong; Quansen Sun·· 2024-01-01精选AI 评分72

基于联合度量学习的图像集合分类类别特定表示

Joint Metric Learning-Based Class-Specific Representation for Image Set Classification

AI 导读

基于摘要分析。本文研究图像集合分类,提出联合度量学习的类别特定表示框架 JMLC,通过联合学习相关与无关度量,缓解既有方法仅使用单个参考集合或忽略度量间联系所带来的鲁棒性问题及对集合大小的敏感性。 方法将待识别集合与相关或无关参考集合迭代建模为仿射包,并利用另一个图像集合进行稀疏或协同重构,再根据表示系数计算待识别集合与参考集合之间的组合度量。作者还提出核扩展 KJMLC,将两类集合映射至高维 Hilbert 空间,以获得近似线性可分的表示,并提出两种无关集合构建策略;具体策略、目标函数、优化步骤及核函数尚未验证。 作者报告,在七个基准数据库上的图像集合分类实验中,所提方法优于所比较的当时先进分类器。摘要未提供数据库名称、划分协议、评价指标、具体数值及基线配置,因此尚不能判断优势幅度或集合大小变化下的稳定性;实验协议、消融及统计信息尚未验证。 平台推测(待验证):若将多个 EEG 试次的特征组成集合,JMLC 的仿射包表示与联合度量可能用于刻画集合内变化及类别关系。该假设依赖可比较的试次特征,以及训练阶段可定义的相关与无关集合,原图像分类结果不构成 BCI 有效性的证据。可复用的是集合重构与度量组合机制,需改造 EEG 特征、集合构建及核函数;低信噪比、跨被试分布偏移、通道差异和小样本可能使仿射包几何关系不稳定。一个可证伪的小实验是在固定被试内 MI 训练/测试划分下,仅用训练数据构建参考集合,对比联合度量与单一度量,并改变每个集合的试次数,检验分类效果是否更稳定。相关 EEG 工作尚未检索确认。

阅读价值

值得关注其联合学习相关与无关度量、结合仿射包重构的图像集合分类机制,但其对集合大小变化的鲁棒性及向 EEG 集合表示迁移的价值仍需验证。

来源:OpenReview · Representation learning · openreview.net