跳到正文
OpenReview · State space models· Li Han; Nan Ding; Guoxuan Wang; Dawei Cheng; Yuqi Liang·· 2023-01-01精选AI 评分72

面向高频交易的高效连续空间策略优化

Efficient Continuous Space Policy Optimization for High-frequency Trading

AI 导读

基于摘要分析。本文研究高频交易中的连续动作投资组合优化,提出深度强化学习策略优化方法 DRPO,旨在缓解既有方法偏重低频交易、离散动作或有限资产数量时的计算效率问题。其主要贡献是分离市场状态与投资组合权重状态,并利用概率动态规划计算奖励期望,降低对轨迹采样反馈的依赖。 核心机制:作者将投资组合管理建模为 Markov Decision Process,以最大化累计收益为目标,在动作空间中直接推断股票权重。环境被拆分为“静态”的市场状态和“动态”的投资组合权重状态,以降低智能体交互复杂度;“静态”在此是作者的建模表述,不能据此认定真实市场不随时间变化。摘要未给出状态转移假设、奖励期望计算公式、策略更新方式或计算复杂度,因此这些机制的具体实现及效率边界尚未验证。 结果与证据:作者报告,在来自 Dow Jones、Coinbase 和 SSE 的真实数据实验中,DRPO 显著优于其采用的先进基准方法。摘要没有提供具体指标、收益数值、基线名称、数据划分、交易频率或统计检验,故无法量化优势,也不能判断交易成本及市场约束下的稳健性。作者声称这是首次在 DRL 框架下以高效连续空间策略优化解决高频投资组合优化问题,该优先性尚未独立核对。 适用范围与复现:本文的主要对象是金融交易,而非神经信号建模或 BCI。其机制依赖市场状态与可控权重状态的分离,以及可计算的奖励期望;摘要尚不足以建立与 EEG 瓶颈的具体对应关系,因此不提出 BCI 迁移实验。复现需进一步核对状态与动作定义、概率动态规划所需的转移信息、数据时间划分、交易成本、基线设置及运行开销;实验协议、消融及统计信息尚未验证。已有 EEG 相关工作尚未检索确认。

阅读价值

值得阅读其分离市场状态与投资组合权重状态、通过概率动态规划计算奖励期望的机制,以核对连续动作策略优化的效率收益及适用条件;摘要不足以验证其对 EEG/BCI 的迁移价值。

来源:OpenReview · State space models · openreview.net