跳到正文
OpenReview · Representation learning· Yuqian Fu; Yuanheng Zhu; Jiajun Chai; Dongbin Zhao·· 2025-01-01精选AI 评分76

LDR:学习离散表征以提高多智能体任务中的噪声鲁棒性

LDR: Learning Discrete Representation to Improve Noise Robustness in Multiagent Tasks

AI 导读

基于摘要分析。该研究针对多智能体强化学习(MARL)中观测噪声干扰协作决策的问题,提出 learning discrete representation(LDR),通过可学习码本构建离散表征,降低小幅输入扰动对决策的影响;主要研究对象是多智能体协作任务,而非 EEG 或 BCI。 机制上,LDR 使用带有 segment mechanism 的量化模块编码观测与队友动作,再由 combiner 处理离散表征并进行决策。其思路是让部分相近的扰动输入映射到相同离散表征。为提高学习效率,set-input block 将多智能体联合观测视为置换不变集合,以降低联合观测空间的复杂度。摘要还称论文对离散表征的表达能力与离散失真的有界性进行了理论分析,但具体假设和界的形式尚未验证。 作者报告,在带噪观测的 StarCraft II 微操任务和 multiagent MuJoCo 中,LDR 优于现有算法,并在干净观测下保持较优表现。摘要未给出具体噪声分布、强度、对照算法、指标或数值,实验协议、消融及统计信息尚未验证;训练监督、码本学习方式与复现配置也需查阅全文。 平台推测(待验证):可学习量化或可用于检验 EEG 表征对小幅扰动的稳定性,但这是跨领域假设。原方法依赖多智能体联合观测、队友动作及强化学习任务,不能直接等同于 EEG 解码;可优先考察量化模块,决策模块及集合输入设计则需按 EEG 任务改造,尤其需保留通道空间身份。低信噪比、跨被试分布差异及小数据下的码本学习可能导致有效信号被量化抹除或输入跨越量化边界。一个可证伪的小实验是在固定 EEG 数据划分与解码器下,对照连续表征和码本量化表征,在相同测试噪声条件下比较 Accuracy 与干净数据性能,并限定码本仅由训练集学习。相关 EEG 工作尚未检索确认。

阅读价值

值得关注的是以可学习码本离散化观测和队友动作来缓解小幅噪声对决策的影响,但其鲁棒性边界及向 EEG 表征学习迁移的有效性尚未验证。

来源:OpenReview · Representation learning · openreview.net