跳到正文
OpenReview · State space models· Xiang Gao; Tianyuan Liu; Yisha Li; Jingxin Liu; Lexi Gao; Xin Li; Haiyang Lu; Liyin Hong·· 2025-01-01精选AI 评分72

TADT-CSA:用于生成式推荐的结合对比状态抽象的时序优势 Decision Transformer

TADT-CSA: Temporal Advantage Decision Transformer with Contrastive State Abstraction for Generative Recommendation

AI 导读

基于摘要分析。该研究面向生成式序列推荐,针对 Decision Transformer(DT)的轨迹拼接困难,以及高维用户状态、庞大状态空间带来的计算和表征学习问题,提出 Temporal Advantage Decision Transformer with Contrastive State Abstraction(TADT-CSA)。其主要贡献是联合建模长期回报与回报的时序趋势,并通过对比状态抽象学习状态表示;研究对象不是 EEG 解码或 BCI。 机制上,模型将传统 Return-To-Go(RTG)与 temporal advantage(TA,时序优势)信号结合,引导 DT 同时关注长期回报及其序列变化趋势。状态抽象模块引入 TA-conditioned State Vector Quantization(TAC-SVQ),利用 TA 分数引导状态码本融入上下文 token 信息;另设奖励预测网络和 contrastive transition prediction(CTP)网络,使状态码本保留当前状态的奖励信息与相邻状态间的转移信息。摘要未给出 TA 的数学定义、具体损失及训练流程。 作者报告,在公共数据集和一个在线推荐系统上的实验表明,TADT-CSA 优于基线方法。摘要未列出数据集名称、划分协议、基线、指标及效果数值,因此不能判断收益幅度、统计可靠性或计算效率改善程度;实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 BCI 应用具有按时间排列的交互轨迹、可定义的奖励及足够的离线记录,该方法可能为序列决策中的状态压缩与回报条件建模提供参考,但这只是迁移假设,不是普通 EEG 分类的直接方案。可复用候选是状态量化与奖励、转移预测约束;需改造信号编码器、奖励定义及动作接口。EEG 低信噪比、跨被试与通道差异、小数据及奖励稀疏可能导致码本失稳或表征丢失。一个可证伪的小实验是在同一离线 BCI 交互协议和固定划分下,对照 DT、加入 TA 的 DT 与完整抽象模块,比较任务回报、计算开销及跨被试表现;相关 EEG 工作尚未检索确认。

阅读价值

值得关注其将时序收益趋势与状态量化、奖励及转移预测结合的机制,但推荐任务中的收益幅度、计算开销与消融贡献仍需全文核对,不能据此认定对 BCI 有效。

来源:OpenReview · State space models · openreview.net