跳到正文
OpenReview · Representation learning· Nadine Rueegg; Christoph Lassner; Michael J. Black; Konrad Schindler·· 2020-01-01精选AI 评分75

Chained Representation Cycling:通过表征间循环学习估计三维人体姿态与体形

Chained Representation Cycling: Learning to Estimate 3D Human Pose and Shape by Cycling Between Representations

AI 导读

基于摘要分析。该研究针对自然图像中三维人体真值难以获取的问题,将从图像像素到三维人体姿态与体形的直接回归,拆解为逐步抽象的表征转换,并以串联循环支持无监督或少量监督学习。其主要研究对象是计算机视觉中的三维人体重建,并非 EEG 解码或 BCI。 方法采用二维身体部位分割作为中间表征:作者认为,该表征既保留了提升到三维所需的信息,又比直接学习三维参数更适合无监督训练。各转换步骤分别构成可在无标注数据上学习的循环,再将这些循环串联以获得最终估计。摘要未说明具体网络结构、循环损失形式、三维人体参数化方式,以及各表征所需的数据来源与先验。 作者报告,该方法能够利用非配对、无标注图像学习三维人体姿态与体形,并在改变配对数据量的实验中显著缓解对配对数据的依赖;摘要未给出数据集、划分、指标、数值或对照细节,因此无法据此判断改善幅度。实验协议、消融及统计信息尚未验证。 平台推测(待验证):可供 EEG 研究借鉴的是“以中间表征拆解难以直接监督的映射,并通过循环约束学习”的假设,而非人体重建模块本身。若用于 EEG,需重新定义具有生理或任务依据的中间表征及双向映射;低信噪比、跨被试差异与通道变化可能使循环仅保留可重建信息,而不保留任务相关信息。一个小规模可证伪实验是在固定被试内划分和标注预算下,比较直接解码、中间表征解码与加入循环约束的版本,检验降低标注量时循环是否带来独立增益。已有 EEG 相关工作尚未检索确认。

阅读价值

值得关注其通过中间表征与串联循环降低配对三维标注依赖的机制,但摘要未提供定量结果,其对 EEG/BCI 的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net