跳到正文
OpenReview · Representation learning· Hengzhou Ye; Xiangyang Yang; You Wu; Xucheng Wang; Yongxin Li; Shuiwang Li·· 2024-01-01精选AI 评分72

通过互信息最大化解耦表征实现实时 UAV 跟踪

Real-Time UAV Tracking Through Disentangled Representation With Mutual Information Maximization

AI 导读

基于摘要分析。本文研究机载资源、电池续航和载荷受限条件下的 UAV 视觉目标跟踪,提出 disentangled representation learning with mutual information maximization(DR-MIM),旨在缓解轻量深度跟踪器在较高压缩率下的跟踪精度损失。 核心机制是将特征空间划分为目标身份相关与身份无关两类表征,并仅使用身份相关特征进行跟踪,以提升表征效率。这里的“身份”指视觉跟踪目标的身份,不是 EEG 中的被试身份。互信息最大化的具体变量、目标函数、解耦监督方式及压缩流程在摘要中未展开,尚不能判断各组件分别承担何种作用。摘要另介绍经量化的 DR-MIM (v2),但量化位宽与实现方式尚未验证。 作者报告在四个空中目标跟踪基准上开展实验,并称所提方法具有优势;其中,DR-MIM (v2) 在 VisDrone2018 上达到 GPU 速度 658 FPS,同时保持 82.1% 的 precision。该 precision 不应改写为 Accuracy,其计算阈值、数据划分、GPU 型号、计时范围及对照基线尚未验证。这组 GPU 结果也不能替代 CPU 或真实机载部署测量。实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的假设是,将任务相关信息与干扰因素解耦,再压缩任务相关表征,可能有助于资源受限的 EEG 解码。但原方法依赖视觉目标身份结构,具体监督与数据规模要求未知;迁移时需要重新定义 EEG 任务信息、被试差异及会话干扰,不能直接把原文的身份相关分支对应为被试身份分支。可考虑复用解耦与互信息约束思想,改造信号编码器和监督目标。低信噪比、小数据及通道变化可能导致解耦不稳定,或误删有用信息。一个可证伪的小实验是在固定 Cross-subject 划分与相同压缩预算下,对比基础解码器和加入解耦约束的版本,同时评估任务指标与推理开销;若跨被试性能未改善,则不支持该迁移假设。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对 DR-MIM 如何通过目标身份相关特征的解耦缓解跟踪器压缩后的精度损失,但摘要中的 GPU 速度不能直接证明机载 CPU 效率,其对 EEG 的迁移价值尚未验证。

来源:OpenReview · Representation learning · openreview.net