跳到正文
OpenReview · Representation learning· Xizhan Gao; Sijie Niu; Dong Wei; Xingrui Liu; Tingwei Wang; Fa Zhu; Jiwen Dong; Quansen Sun·· 2024-01-01精选AI 评分72

用于图像集合分类的基于联合度量学习的类别特定表示

Joint Metric Learning-Based Class-Specific Representation for Image Set Classification

AI 导读

基于摘要分析。本文研究图像集合分类,提出基于联合度量学习的类别特定表示框架 JMLC,联合学习相关与不相关度量,以应对既有方法仅利用单个图库集合或忽略不同度量之间联系的问题,并给出核扩展 KJMLC。 核心机制是迭代地将待分类集合及相关或不相关图库集合建模为仿射包,再利用另一图像集合对该仿射包进行稀疏或协同重构,通过所得表示系数计算查询集合与图库集合之间的组合度量。相较于摘要所述既有方法,其主要区别是联合处理相关与不相关度量,而非孤立估计集合间距离。KJMLC 将图库集合与待分类集合嵌入高维 Hilbert 空间;作者认为这使数据在核空间中近似线性可分。此外,作者提出两种新的不相关集合构建策略,但摘要未披露具体规则。 作者报告,在七个基准数据库的图像集合分类实验中,所提方法优于当时的先进图像集合分类器。数据库名称、划分协议、对照方法、评价指标及具体数值尚未验证,不能据此量化性能增益;目标函数、优化过程、核函数选择、集合大小变化实验、消融及统计信息也需核对全文。 平台推测(待验证):若将同一任务下的多个 EEG 试次编码为一个特征集合,仿射包重构与联合度量机制可能用于评估集合内变化较大的类别。该假设依赖有意义的试次特征空间、类别监督以及相关和不相关集合的可靠定义;可复用集合表示与度量模块,但需改造 EEG 特征提取和集合构建方式。低信噪比、通道差异、跨被试分布变化及小样本可能使仿射包失真或核映射过拟合。一个可检验的小实验是在固定被试内划分、避免试次跨集合重叠的前提下,改变每个集合的试次数,比较联合度量与单一度量的分类表现及稳定性。相关 EEG 工作尚未检索确认,原图像实验不构成 BCI 有效性证据。

阅读价值

值得阅读其相关与不相关度量联合学习及仿射包重构机制,以核对图像集合大小变化下的鲁棒性;其对 EEG 集合分类的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net