跳到正文
OpenReview · Representation learning· Lei Wu·· 2016-02-01精选AI 评分74

面向低延迟人体动作识别的有效主动骨架表示

Effective Active Skeleton Representation for Low Latency Human Action Recognition

AI 导读

基于摘要分析。本文研究深度传感器场景下的低延迟 3D 人体动作识别,提出主动骨架表示(active skeleton representation),并结合带 maximum-pattern-margin 的多通道多实例学习,旨在支持交互系统及时识别动作及处理未分段序列。 方法首先通过 Markov random field 将人体骨架的各肢体编码为状态,再聚合各肢体的编码特征形成骨架表示,最后使用多通道多实例学习提升识别性能。摘要未给出状态空间、特征聚合方式、实例与包的定义、maximum-pattern-margin 的具体目标函数,以及在线预测和触发判定机制,这些细节尚未验证。 作者报告,该方法在 MSR Action3D、MSR DailyActivity3D 和 Huawei/3DLife-2013 上验证了表示的有效性,并优于所比较的低延迟识别方法;作者还报告其关节位置相关特征计算具有鲁棒性,且能处理未分段序列。摘要未提供具体指标、延迟定义、数据划分、对照方法及数值,因而无法判断性能提升幅度或准确性与延迟之间的权衡;实验协议、消融及统计信息尚未验证。 平台推测(待验证):可讨论的跨领域对应是利用结构化局部状态与多实例学习处理未精确分段的时序信号,而不是将骨架表示直接等同于 EEG 表示。原方法依赖明确的肢体与关节结构;若迁移至 EEG,需要重新定义通道或脑区关系、局部状态及时间窗实例,并明确监督粒度。EEG 的低信噪比、跨被试差异、通道配置变化及小样本条件可能使状态估计不稳定。一个可检验的假设是:在固定 EEG 数据划分、时间窗及监督条件下,结构化状态编码能否相较非结构化特征改善识别性能与决策延迟的权衡。该设想不属于本文已验证结果,已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对其如何将肢体状态编码与多实例学习用于未分段动作序列的低延迟识别,但摘要不足以验证准确性与响应延迟的权衡,也不能据此认定其适用于 EEG/BCI。

来源:OpenReview · Representation learning · openreview.net