跳到正文
OpenReview · State space models· Lei Zhang; Mukesh Ghimire; Zhe Xu; Wenlong Zhang; Yi Ren·· 2024-01-01精选AI 评分76

用于求解具有参数化状态约束的非零和微分博弈的 Pontryagin 神经算子

Pontryagin neural operator for solving general-sum differential games with parametric state constraints

AI 导读

基于摘要分析。本文研究具有参数化状态约束的双人非零和微分博弈,提出 Pontryagin-mode neural operator,旨在缓解价值函数与策略近似的维数灾难,以及状态约束导致价值不连续时 physics-informed neural networks(PINN)的收敛困难,并学习可跨博弈参数泛化的价值函数与反馈控制策略。 技术核心是协态损失(costate loss):度量前向与后向协态轨迹展开之间的差异,作者称其计算成本较低。作者认为,状态约束下协态动力学的不连续性有助于学习不连续价值函数,且无需当前对照方法所依赖的人工监督数据;同时,协态与策略之间的紧密关系,使协态学习成为获得可泛化安全控制策略的关键。摘要未给出损失的具体形式、算子结构,以及训练所需边界条件和数据生成流程。 作者报告,在具有参数化状态约束的博弈中,该方法的安全性能优于现有 SOTA,但摘要未列出具体任务、对照方法、安全指标、参数划分或数值结果,因此不能据此判断优势幅度及跨参数泛化边界。实验协议、消融及统计信息尚未验证。 本文主要对象是微分博弈与安全反馈控制,而非 EEG 解码或 BCI。平台推测(待验证):若某类 BCI 闭环辅助控制可明确建模为具有状态约束的双人非零和微分博弈,协态一致性损失可能具有复用价值;但需要重新定义动力学、双方目标与安全约束,并处理 EEG 解码噪声及动力学模型误差。最小验证可在固定仿真动力学、目标和训练预算下,对比加入与不加入协态损失时未见约束参数下的约束违反率;该实验仅检验控制机制,不构成真实 BCI 有效性证据。相关 EEG 工作尚未检索确认。

阅读价值

值得关注其利用前向与后向协态轨迹不一致构造损失、学习状态约束下不连续价值函数的机制,但安全性优势的具体评估协议与适用范围尚未验证。

来源:OpenReview · State space models · openreview.net