跳到正文
OpenReview · Representation learning· Bohao Wei; Hefei Ling; Yuxuan Shi·· 2024-01-01精选AI 评分70

用于步态识别的重要性感知时空表征学习

Importance-Aware Spatial-Temporal representation Learning for Gait Recognition

AI 导读

基于摘要分析。本文研究基于行人轮廓序列的步态身份识别,针对身体局部辨识贡献不同、轮廓分割误差及行走姿态变化等问题,提出 Importance-Aware Spatial-Temporal representation Learning(IAGait),通过学习空间局部与时间帧的重要性来聚合步态表征。 空间模块 Spatial-Importance-Aware Module(SIAM)学习身体水平分块的重要性,引入弱监督策略,并通过 Pseudo-Label Assignment(PLA)利用度量学习难度分配局部重要性伪标签。时间模块 Temporal-Importance-Aware Module(TIAM)利用自注意力学习不同帧的重要性,并采用 View-Information-Erasing Module(VIEM)消除视角信息,以减轻视角变化对时间重要性感知的干扰。摘要未给出伪标签生成规则、监督信号细节、损失形式及视角信息消除的具体实现。 作者报告,实验支持各模块的有效性,并在常用数据集上取得领先性能;但摘要未列明数据集名称、划分协议、对照方法和指标数值,因此目前不能核对优势的幅度与适用条件。实验协议、消融及统计信息尚未验证。作者表示计划发布源码,不等于代码已经公开。 平台推测(待验证):其“局部可靠性与时间重要性联合建模”可能对应 EEG 中通道或脑区质量不均、部分时间窗受伪迹污染的问题,但原方法依赖轮廓序列的水平身体分块、度量学习难度及视角因素,这些条件不直接等同于 EEG 的通道拓扑、任务监督与被试差异。可考虑复用重要性聚合思路,而空间分块、伪标签构造和待消除因素均需重新定义;低信噪比或小样本下,难度信号也可能将噪声误判为有辨识价值的信息。一个可证伪的小实验是在固定 Cross-subject EEG 划分与同一骨干下,对比无加权、仅时间加权及通道—时间联合加权,并测试人工通道污染下的表现。上述迁移并非原论文验证结果,相关 EEG 工作尚未检索确认。

阅读价值

值得核对的是 IAGait 如何以度量学习难度构造身体局部重要性伪标签,以及视角信息消除能否改善时间重要性学习;摘要尚不足以验证其性能优势或 EEG 迁移价值。

来源:OpenReview · Representation learning · openreview.net