跳到正文
OpenReview · Representation learning· Silin Zhou; Shuo Shang; Lisi Chen; Christian S. Jensen; Panos Kalnis·· 2024-01-01精选AI 评分73

RED:利用全面信息的有效轨迹表征学习

RED: Effective Trajectory Representation Learning with Comprehensive Information

AI 导读

基于摘要分析。本文研究移动轨迹的表征学习,将轨迹映射为可供轨迹相似度计算、轨迹分类和行程时间估计等下游任务使用的向量,提出自监督框架 RED,以更充分利用轨迹中的道路、时空与用户信息;研究对象不是 EEG 或 BCI。 RED 以 Transformer 为骨干,通过掩码轨迹中的路径训练掩码自编码器(MAE)。Road-aware masking 在掩码时保留关键路径,以维持重要的移动模式信息;spatial-temporal-user joint Embedding 将空间、时间和用户信息联合编码为输入。Dual-objective task learning 要求编码器预测轨迹中的下一路段,解码器重建完整轨迹。此外,作者修改注意力机制以建模轨迹的时空相关性;摘要未给出具体公式、关键路径判定方式或目标权重。 作者报告,在 3 个真实世界数据集的 4 项下游任务上,与 9 种作者称为先进方法的 TRL 基线比较时,RED 通常能使最优基线的准确性提升超过 5%。摘要未列出全部任务、数据集名称、划分协议和具体指标,也未明确该增益是相对百分比还是百分点,因此不能据此作跨协议比较。实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的假设是,在 EEG 自监督学习中,保留具有信号结构意义的片段,并结合局部预测与整体重建,可能比无结构随机掩码更有利于表征学习。原方法依赖道路结构、时空关联及用户信息,不能直接等同于 EEG 的通道、时间与被试结构;可复用的是掩码自编码和双目标训练思路,掩码规则、位置编码与预测目标需要改造。低信噪比可能使关键片段识别失效,被试信息也可能诱导身份依赖,小数据下联合目标未必稳定。可在固定 EEG 数据划分与相同骨干下,比较随机掩码和预先定义的结构感知掩码,并检验加入双目标后跨被试表现是否改善。相关 EEG 工作尚未检索确认。

阅读价值

值得核对 RED 如何结合结构感知掩码、联合嵌入与双目标自监督训练利用轨迹信息,但摘要报告的性能增益及其对 EEG 表征学习的适用性仍需分别验证。

来源:OpenReview · Representation learning · openreview.net