跳到正文
OpenReview · Representation learning· Dingqiang Ye; Chao Fan; Jingzhe Ma; Xiaoming Liu; Shiqi Yu·· 2024-01-01精选AI 评分75

BigGait:利用大型视觉模型学习所需的步态表征

BigGait: Learning Gait Representation You Want by Large Vision Models

AI 导读

基于摘要分析。本文研究面向远程身份识别的步态表征学习,提出 BigGait,尝试利用任务无关的大型视觉模型(LVMs)的通用知识,减少对受监督、任务专用上游模块所生成的轮廓序列等显式步态表征的依赖。 核心机制是 Gait Representation Extractor(GRE):借鉴已有步态表征的设计原则,将 LVMs 的通用知识转换为隐式步态表征。摘要称这一转换不需要第三方监督信号,但这不等于整个系统完全无监督,也不能据此确定 LVMs 是否冻结、下游识别如何训练或使用何种损失。作者将传统流程的标注成本与潜在误差累积作为研究动机,具体如何缓解这些问题仍需核对正文。 作者报告,在 CCPG、CAISA-B*(按所给摘要拼写保留)和 SUSTech1K 上,BigGait 在域内与跨域任务的大多数情形中优于此前方法。摘要未提供具体指标、数值、数据划分或基线配置,因此不能量化优势,也不能将跨域结果直接解读为跨被试或跨会话泛化能力。 材料给出了 OpenGait 代码仓库,提供了进一步核查实现的入口,但具体版本、预训练模型依赖、训练配置及可复现性尚未验证。实验协议、消融及统计信息也尚未验证。本文的主要研究对象是视觉步态身份识别,并非 EEG 或 BCI;摘要不足以建立 GRE 与神经信号表征之间的具体机制对应关系,因此不据此提出 BCI 迁移效果或复现实验建议。

阅读价值

值得关注的是 BigGait 将任务无关大型视觉模型的通用知识转化为隐式步态表征的机制,以及作者报告的域内与跨域表现;其具体监督边界、对照协议及复现结果尚未验证。

来源:OpenReview · Representation learning · openreview.net