通过时间缓变原理自学用于视觉跟踪的深度不变表征
Self-taught learning of a deep invariant representation for visual tracking via temporal slowness principle
基于摘要分析。本文研究视觉跟踪中的表征学习,提出利用强时间缓变约束与堆叠卷积自编码器,从被跟踪的连续图像块中学习复数值不变表征,以替代未针对跟踪信息设计的手工视觉描述符。 方法先在无标签数据上离线学习深层局部缓变表征,再将其迁移到跟踪器的观测模型。观测模型保留旧训练样本以缓解跟踪漂移,并收集与目标运动模式一致的负样本以增强判别能力。系统利用所学表征和在线训练样本训练 logistic regression 分类器,区分目标与背景,并在线重新训练以适应外观变化,最终结合粒子滤波完成跟踪。摘要未给出时间缓变约束的数学形式、复数值表征的构造及网络配置。 作者报告,在多种具有挑战性的基准序列上,该跟踪器相较若干当时的先进跟踪器表现较好;但摘要未提供基准名称、指标、具体数值或对照配置,不能据此判断优势幅度。实验协议、消融及统计信息尚未验证,表征学习与在线样本管理各自的贡献需查阅全文。 平台推测(待验证):其可迁移机制是利用相邻时刻的连续性学习对短期变化较稳定的表征,依赖原始序列中邻近样本具有相对稳定的目标语义。假设 EEG 任务存在类似的局部状态连续性,可探索复用时间缓变约束与无标签预训练流程,但需将图像编码器改造为适配 EEG 时间与通道结构的编码器。低信噪比下缓变伪迹可能被保留,快速 ERP 或状态切换可能被过度平滑,跨被试、通道差异与小数据也可能削弱收益。一个可证伪的小实验是在同一 EEG 编码器及固定跨被试划分下,仅比较有无时间缓变约束,确保预训练只使用训练划分,并检验分类表现与状态切换附近的误差。已有 EEG 相关工作尚未检索确认。
值得阅读的是以时间缓变约束学习无标签序列表征、再结合在线分类与粒子滤波的完整跟踪路径;其对 EEG 的适用性尚未验证。
来源:OpenReview · Representation learning · openreview.net