跳到正文
OpenReview · Representation learning· Shiqin Liu; Chaozhuo Li; Xi Zhang; Minjun Zhao; yuanbo xu; Jiajun Bu·· 2024-07-21精选AI 评分72

通过拓扑驱动预训练深度融合语义与交互的商品表征学习

Deeply Fusing Semantics and Interactions for Item Representation Learning via Topology-driven Pre-training

AI 导读

基于摘要分析。该研究面向在线电子商务中的商品表征学习,提出 TESPA,以联合利用单个商品的语义信息与用户共点击、共浏览等行为形成的商品间交互信息。核心贡献是让语义建模与交互建模相互增强,而非仅依赖一种信息或将两者松散结合。 机制上,TESPA 通过细粒度拓扑预训练,将交互图中的协同过滤信号编码到语言模型中;随后根据语义相似性丰富交互图,并通过多通道协同训练,在统一框架下进一步融合语义与交互。摘要未披露拓扑预训练目标、多通道的具体定义、损失形式及图更新规则,这些实现细节尚未验证。 作者报告,在线与离线评估均显示该方法优于所比较的方法,但摘要未提供数据集、划分协议、基线名称、指标或数值,因此无法判断提升幅度、统计可靠性及适用范围。实验协议、消融及统计信息尚未验证,代码与复现条件亦未确认。 平台推测(待验证):可供 EEG 研究参考的是“属性表征与关系图双向增强”的机制,而非电商任务效果本身。迁移假设要求 EEG 样本具有可用的属性描述及有依据的关系结构;商品语义和用户交互不能直接等同于 EEG 信号与脑连接。可能复用双向增强框架,但需改造信号编码器、关系图构建方式及预训练目标。低信噪比、跨被试差异、通道配置变化与小样本可能使相似性图主要捕捉噪声或被试身份,并在迭代中放大偏差。一个可证伪的小实验是在固定跨被试划分下,仅用训练集构图,对比单独信号编码、固定图融合与双向增强,并用随机图对照检验收益是否确实来自关系结构。已有 EEG 相关工作尚未检索确认。

阅读价值

值得关注的是 TESPA 将交互图拓扑注入语言模型、再以语义相似性丰富交互图的双向融合机制,但其具体训练协议及向 EEG 表征学习迁移的有效性尚未验证。

来源:OpenReview · Representation learning · openreview.net