跳到正文
OpenReview · State space models· Wenbin Li; Mario Fritz·· 2016-01-01精选AI 评分76

通过层级标签空间上的序列预测识别进行中的复杂活动

Recognition of ongoing complex activities by sequence prediction over a hierarchical label space

AI 导读

基于摘要分析。该研究面向视频中进行中的复杂人类活动识别:当只观察到少量视频时,细粒度活动判断可能不可靠,因此作者提出在层级标签空间上进行序列预测,随着证据增加,从粗粒度标签逐步转向细粒度标签,以满足预设的目标准确率。 核心机制是使用 recurrent neural network 对活动标签序列进行预测,并直接在由粗到细的层级标签空间中训练。其重点并非仅提前输出最终活动类别,而是让预测的标签细粒度随观测进程变化,学习准确率与标签细粒度之间的权衡。摘要未提供具体网络结构、损失函数、目标约束的实现方式或推理规则,不能据此将其归类为 State space models 方法。 作者报告,为研究该任务收集了一个包含长时复杂活动的视频数据集,并提供由粗到细的层级标签标注;作者报告,该方法优于若干基线,包括此前为物体识别开发的准确率与标签细粒度权衡方法。摘要未给出数据集名称、规模、划分、评价指标或具体成绩,实验协议、消融及统计信息尚未验证。 平台推测(待验证):该机制可为具有明确类别层级的 EEG 早期识别任务提供假设,即先预测较粗类别,再随着信号证据累积细化判断。可复用的是层级输出与随时间调整标签细粒度的思路;需改造的是视频输入表征、EEG 时序编码和标签层级,并重新校准目标准确率。它依赖合理的层级监督及足够的时序证据,低信噪比、跨被试差异、通道变化和小数据可能导致粗粒度预测也不稳定。一个可检验的小实验是在已有明确类别层级的 EEG 数据上,固定被试划分和观测窗口,将层级序列预测与平面分类及静态粗粒度分类比较,检验在相同目标准确率下是否能更早输出更细标签。相关 EEG 工作尚未检索确认,视频领域结果不构成 BCI 有效性的证据。

阅读价值

值得核对其如何在部分视频观测下通过层级标签序列预测实现准确率与标签细粒度的权衡,但其对 EEG 早期识别的适用性尚未验证。

来源:OpenReview · State space models · openreview.net