跳到正文
OpenReview · Representation learning· Cen Rao; Mubarak Shah·· 2001-01-01精选AI 评分75

人体动作的视角不变表示与学习

View-Invariant Representation and Learning of Human Action

AI 导读

基于摘要分析。该研究面向视频中的人体动作理解,提出利用轨迹时空曲率提取动态时刻与区间(dynamic instants and intervals),构造视角不变的动作表示,并用于自动动作分割与增量学习。 核心机制是先将视频中的动作转化为基于轨迹几何变化的表示,再据此区分和归并动作实例。作者称,系统可从没有初始动作模型的状态开始,逐步学习不同动作,并发现由不同人员、在不同视角下执行的同类动作。摘要所称“无需任何训练”应结合这一增量学习过程理解,不能据此认定系统完全没有学习或模型更新。 评估方面,作者报告使用了五名人员在不同视角下完成约50次动作的视频片段,并定性描述系统正确解释了大多数动作。这里的动作数量不能等同于动作类别数;摘要未提供可核对的 Accuracy 等指标,也未说明训练与测试划分,因此不能将其结果解释为严格的跨人员或跨视角泛化评估。 复现时需核对轨迹的获取方式、动态时刻与区间的判定规则、动作匹配和增量更新机制,以及视角不变性成立的几何条件。实验协议、对照、消融及统计信息尚未验证。原研究对象是视频动作识别,材料未提供 EEG 或 BCI 验证,不能将其视觉视角不变性直接等同于神经信号的跨被试或跨会话不变性。

阅读价值

值得核对其如何利用轨迹的时空曲率构造视角不变动作表示,并在无初始动作模型的条件下实现增量学习;摘要仅提供定性结果,识别性能与不变性的适用条件尚未验证。

来源:OpenReview · Representation learning · openreview.net