跳到正文
OpenReview · State space models· Shuo Wang; Yizhou Wang; Song-Chun Zhu·· 2015-01-01精选AI 评分76

面向场景建模、解析与属性标注的层次空间铺砌学习

Learning Hierarchical Space Tiling for Scene Modeling, Parsing and Attribute Tagging

AI 导读

基于摘要分析。本文研究自然图像中物体与区域形状、布局多变所造成的场景配置建模问题,提出 hierarchical space tiling(HST,层次空间铺砌),以离散化庞大且连续的场景配置空间,并为其加入名词和形容词属性,描述场景内部的语义。 方法以配有描述文本的自然图像为输入,在属性精确位置未知的条件下,弱监督地联合学习场景配置与属性,并将属性映射到 HST 节点。训练从完整 HST 出发,在 learning-by-parsing 框架下迭代估计模型;推理时通过动态规划,求取带有关联属性的最可能解析树。摘要未披露具体目标函数、结构更新规则与计算复杂度。 作者报告,对 HST 表示效率的定量分析显示,所学表示的歧义更少,内部概念具有语义意义;在 scene classification、attribute recognition、attribute localization 和 pixel-wise scene labeling 四项任务上,作者报告性能与效率有所改善。摘要未提供数据集、划分、对照方法或指标数值,实验协议、消融及统计信息尚未验证。 原论文的主要对象是图像场景的空间结构与语义解析,而非 EEG 时序或 BCI 解码。现有材料不足以建立 HST 空间铺砌与 EEG 瓶颈之间的具体机制对应,因此不据此提出迁移效果或复现实验建议;已有 EEG 相关工作尚未检索确认。复现原方法仍需查阅全文,核对 HST 构建、图文弱监督对齐及动态规划的具体实现。

阅读价值

值得关注的是 HST 如何在属性位置未知的弱监督条件下联合学习场景结构与语义,并通过动态规划完成解析;其对 EEG/BCI 的适用性尚未验证。

来源:OpenReview · State space models · openreview.net