跳到正文
OpenReview · Representation learning· Xiaojun Chang; Zhigang Ma; Yi Yang; Zhiqiang Zeng; Alexander G. Hauptmann·· 2017-01-01精选AI 评分70

用于多媒体事件检测的双层语义表征分析

Bi-Level Semantic Representation Analysis for Multimedia Event Detection

AI 导读

基于摘要分析。本文研究多媒体事件检测中不同来源语义表征的预测能力差异,以及噪声或无关概念对检测的干扰,提出同时进行来源级加权与概念级抑制的双层语义表征分析方法,并关注仅有少量正例的检测场景。 其语义表征来自外部图像或视频档案上训练的概念检测器,再将这些检测器应用于事件视频。不同档案的固有差异可能使其表征对特定事件具有不同预测能力;同一表征内也可能包含与目标事件无关的概念。该方法在来源级学习不同档案所产生表征的权重,在整体概念级限制噪声或无关概念的负面影响。摘要未披露具体目标函数、优化过程及两级分析的耦合方式。 作者报告在 TRECVID MED 2013 和 2014 数据集上开展实验,结果支持所提方法的有效性,但摘要未提供指标、数值、正例数量、数据划分或对照基线,因而无法据此判断提升幅度及适用边界。实验协议、消融及统计信息尚未验证。 平台推测(待验证):假设 EEG 任务已有多个来源且语义可对齐的特征或检测器输出,来源级加权与概念级筛选可能用于缓解来源贡献不均和无关特征干扰;这不等于已证实的 BCI 效果。可复用的是两级筛选思路,需改造的是 EEG 表征构建与概念对应关系。低信噪比、跨被试差异、通道配置变化及小样本可能使权重估计不稳定。一个可检验的小实验是在固定跨被试划分下,对比等权融合、仅来源加权和双层分析,检验概念级抑制是否带来额外收益。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对其来源级加权与概念级噪声抑制如何协同支持少量正例的视频事件检测,但摘要未提供量化结果,其对 EEG 多源表征融合的价值尚未验证。

来源:OpenReview · Representation learning · openreview.net