跳到正文
OpenReview · Representation learning· Dingqiang Ye; Chao Fan; Jingzhe Ma; Xiaoming Liu; Shiqi Yu·· 2024-01-01精选AI 评分76

BigGait:利用大型视觉模型学习所需的步态表征

BigGait: Learning Gait Representation You Want by Large Vision Models

AI 导读

基于摘要分析。本文研究面向远程身份识别的步态表征学习,提出 BigGait,利用任务无关的大型视觉模型(LVMs)所提供的通用知识,减少对轮廓序列等显式步态表征及任务专用上游监督模块的依赖。研究对象是视觉步态识别,而非 EEG 解码或 BCI。 核心组件 Gait Representation Extractor(GRE)借鉴已有步态表征的设计原则,将通用视觉知识转化为隐式步态表征;摘要明确称这一转换不需要第三方监督信号,但不能据此认定整个训练流程完全无监督。作者将任务专用上游带来的标注成本和潜在误差累积作为研究动机。具体 LVM、GRE 结构、损失函数、训练策略及推理流程尚未验证。 作者报告,在 CCPG、CAISA-B* 和 SUSTechlK 上,BigGait 在域内及跨域任务的大多数情形中优于既有方法;摘要未提供具体指标、数值、划分及对照方法,因此无法核对优势幅度或不同协议下的可比性。数据集名称按所给摘要保留,其准确拼写亦待核对。实验协议、消融及统计信息尚未验证。 摘要提供了 OpenGait 代码仓库地址,但代码与本文方法的对应版本、预训练权重和复现配置尚未验证。当前材料未建立视觉表征提取与 EEG 信号处理之间的具体机制对应,不据此生成 BCI 迁移方案;相关 EEG 工作尚未检索确认。

阅读价值

值得关注的是 GRE 如何在不依赖第三方监督信号的条件下将通用视觉知识转化为步态表征;其跨域优势目前仅有摘要中的定性报告,尚不能据此推断 EEG/BCI 有效性。

来源:OpenReview · Representation learning · openreview.net