跳到正文
OpenReview · Representation learning· Xuehao Gao; Shaoyi Du; Yang Wu; Yang Yang·· 2023-01-01精选AI 评分73

更多分解,更好聚合:人体运动预测中频率表征学习的两个新视角

Decompose More and Aggregate Better: Two Closer Looks at Frequency Representation Learning for Human Motion Prediction

AI 导读

基于摘要分析。本文研究人体运动预测中的频率表征学习,提出“更多分解、更好聚合”的思路,通过分解—聚合两阶段策略,从输入人体运动中提取并整合多视角频率表征。主要研究对象是人体姿态运动序列,而非 EEG 或 BCI。 机制上,frequency decomposition unit 将运动的频率特征嵌入多个空间,形成多视角表征;feature aggregation unit 则通过空间内与空间间特征聚合层,整合这些空间中的信息以支持运动预测。摘要未说明频域变换方式、多空间映射的具体结构、损失函数或训练与推理细节,尚不能判断其相对于已有频域方法的具体增益来源。 作者报告,在各自数据集的人体运动预测评估中,相比其所述最先进方法,Human3.6M 上提升 8%–12%,CMU MoCap 上提升 3%–7%,3DPW 上提升 7%–10%。摘要未给出对应指标、预测时域、数据划分、基线名称及百分比计算口径,因此这些范围不能解读为 Accuracy 提升,也不宜跨数据集直接比较。实验协议、消融及统计信息尚未验证。 平台推测(待验证):可检验的迁移假设是,多空间频率分解与聚合可能有助于表征 EEG 中异质的频谱信息。可借鉴的是分解与聚合框架;人体姿态输入、预测目标和输出模块则需按 EEG 任务重新设计。原方法依赖运动序列的频域结构,具体监督形式和训练规模尚未验证,不能假定其适用于低信噪比、跨被试差异或通道配置变化下的 EEG;小数据下增加多空间映射也可能带来过拟合。一个小规模检验可在固定数据划分与训练预算下,对比单空间频域基线、仅分解以及分解加聚合三种配置,考察跨被试任务表现及其变异。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对其频域多空间分解与空间内、空间间聚合如何改善人体运动预测,但摘要中的相对提升缺少指标及评估协议背景,不能直接作为 EEG 迁移有效性的证据。

来源:OpenReview · Representation learning · openreview.net