面向稳健两阶段对象中心视觉推理的弱监督概念瓶颈学习
Weakly supervised concept Bottleneck Learning for Robust Two stage Object centric visual reasoning
基于摘要分析。本文研究两阶段神经符号视觉推理中,将图像感知映射为可供关系推理使用的符号谓词时,如何降低概念标注成本。作者提出 Dynamic Orthogonal Concept Bottleneck(D-OCB),以对象中心的 slot-VAE 为基础,在极弱监督下学习与人类概念对齐的符号表示;研究对象是视觉概念学习与推理,并非 EEG 或 BCI。 机制上,D-OCB 在重建自监督之外,对不同概念子空间之间的相关性施加惩罚,以引入概念类别相互独立的先验;同时在训练中动态学习损失平衡系数,减少人工调节。其动态维度分配机制允许表征较好的概念向学习滞后的概念让出潜在维度。作者将这一机制用于缓解极低监督下的训练不稳定与表示坍塌,但摘要未给出具体优化形式、维度分配准则及训练流程。 作者报告,在低标签预算的视觉评估中,D-OCB 获得较高的概念对齐程度与下游视觉推理准确率,并达到或超过端到端范式。摘要未提供数据集、标签预算、划分、指标数值及基线配置,因而不能量化优势或判断适用范围;实验协议、消融及统计信息尚未验证。复现需核对概念监督的粒度、独立性先验是否符合任务,以及三个动态或约束机制各自的贡献。 平台推测(待验证):若 EEG 任务具有可独立标注且近似解耦的概念因素,可假设概念瓶颈与动态容量分配有助于研究小样本下的可解释表征;但视觉对象槽位不能直接等同于 EEG 通道或神经源,需改造输入编码与概念定义。低信噪比、跨被试差异、通道变化以及概念本身相关,都可能使去相关约束或维度重分配失效。可在固定被试内划分和相同少量概念标签预算下,对比固定维度与动态维度分配,并控制编码器及其他损失设置,检验概念预测和下游任务表现是否稳定改善。相关 EEG 工作尚未检索确认,此假设不构成已验证的 BCI 效果。
值得核对 D-OCB 如何结合动态损失权重、概念子空间去相关与维度重分配来稳定极少标签下的概念学习,但其相对贡献及向 EEG 迁移的可行性尚未验证。
来源:OpenReview · Representation learning · openreview.net