跳到正文
OpenReview · Representation learning· Evgeny Frolov; Ivan V. Oseledets·· 2023-01-01精选AI 评分73

通过 Hankel 矩阵表示实现面向下一物品推荐的张量序列学习

Tensor-Based Sequential Learning via Hankel Matrix Representation for Next Item Recommendations

AI 导读

基于摘要分析。本文研究下一物品推荐,提出一种基于张量分解的轻量序列学习方法,通过特殊的 Hankel 矩阵表示将序列结构知识嵌入学习过程,尝试复现自注意力网络的部分性质;研究对象是用户行为序列,而非 EEG 或 BCI。 机制方面,作者从自注意力模型所学参数空间的特殊结构出发,构建浅层线性架构,以替代较复杂的神经网络模型。摘要未给出 Hankel 矩阵的具体构造、张量分解形式、优化目标,以及被复现的自注意力性质,因而尚不能判断其表达能力与适用边界。 作者报告,相对于其神经网络对照,该方法显著缩短了训练时间,同时保持有竞争力的推荐质量。摘要未提供数据集、数据划分、具体基线、推荐指标或加速数值;实验协议、消融及统计信息尚未验证,不能据此认定其普遍优于 Transformer。 平台推测(待验证):可迁移的机制假设是利用 Hankel 表示编码时序结构,再以张量分解降低学习成本。原任务依赖用户—物品交互序列,具体监督形式和数据规模尚未验证;用于 EEG 时需将离散交互序列改造为连续、多通道信号的时间窗表示,并重新定义学习目标。可考察其是否缓解小数据条件下时序建模的计算与过拟合问题,但低信噪比、跨被试差异及通道变化可能使结构假设失效。一个可证伪的小实验是固定 EEG 数据划分与预处理,比较 Hankel 表示加张量分解、非 Hankel 表示及轻量时序基线的任务表现和训练成本,再单独检验跨被试稳定性。上述不是本文已验证结果,已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对 Hankel 矩阵表示如何将序列结构先验嵌入张量分解,以及其相对自注意力模型的训练成本与推荐质量权衡,但摘要尚不足以判断其对 EEG 的适用性。

来源:OpenReview · Representation learning · openreview.net