跳到正文
OpenReview · Representation learning· Joseph Ortiz; Antoine Dedieu; Wolfgang Lehrach; J. Swaroop Guntupalli; Carter Wendelken; Ahmad Humayun; Guangyao Zhou; Sivaramakrishnan Swaminathan; Miguel Lázaro-Gredilla; Kevin Murphy·· 2024-01-01精选AI 评分78

DMC-VB:含视觉干扰的控制任务表征学习基准

DMC-VB: A Benchmark for Representation Learning for Control with Visual Distractors

AI 导读

基于摘要分析。该研究关注离线强化学习(RL)与行为克隆智能体在背景、相机视角等控制无关视觉因素变化下的脆弱性,提出 DeepMind Control Visual Benchmark(DMC-VB),用于评估从视觉输入完成连续控制任务时的表征鲁棒性。主要贡献是数据集及配套的三项表征预训练评估基准,而非 EEG/BCI 方法。 DMC-VB 在 DeepMind Control Suite 中采集,覆盖不同难度的运动与导航任务、静态与动态视觉变化,以及不同技能水平策略生成的数据;数据系统性提供状态与像素观测配对,并包含隐藏目标任务。作者称其规模比先前工作高一个数量级,但摘要未给出绝对规模及逐项对照范围。配对观测为比较状态输入与像素输入策略提供了评估基础,具体划分和干扰配置尚未验证。 作者报告,在其 DMC-VB 实验中,预训练表征并未帮助策略学习,像素观测策略与状态观测策略之间仍存在较大表征差距;同时,在专家数据有限的条件下,使用次优数据或具有随机隐藏目标的任务进行表征预训练,可以使策略学习受益。这些结论需结合具体预训练方法、任务和数据条件解读,不能泛化为所有预训练均无效。摘要未列出方法清单、指标、分数或统计结果,实验协议、消融及统计信息尚未验证。材料提供了数据集及智能体训练、评估代码的仓库地址,实际复现条件尚未核验。 平台推测(待验证):其区分任务相关信息与无关观测变化的评估思路,可为 EEG 鲁棒表征研究提供参照,但视觉背景扰动并不等同于低信噪比 EEG、跨被试差异或通道变化。若迁移,需要重新定义生理信号扰动和任务标签,并处理状态—观测配对难以获得的问题;原领域结果不构成 BCI 有效性证据,已有 EEG 相关工作尚未检索确认。

阅读价值

DMC-VB 将视觉干扰、数据策略水平及隐藏目标纳入离线控制评估,值得用于核对表征预训练何时无益、何时能在专家数据受限条件下提供收益,但其对 EEG/BCI 的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net