OpenReview · Representation learning· Rong Pan·· 2018-04-25精选AI 评分74
将 GAN 引入知识表示学习的负采样
Incorporating GAN for Negative Sampling in Knowledge Representation Learning
AI 导读
基于摘要分析。本文研究知识图谱表示学习中的负采样问题,提出利用 Generative Adversarial Networks(GAN)生成高质量负样本,并由判别器学习实体与关系的低维嵌入,旨在改善随机负样本过于简单、难以提供有效训练信号的问题。 机制上,摘要指出传统知识嵌入方法通常通过负采样优化基于间隔的排序损失;所提框架以生成器提供负样本,让负样本构造与表示学习形成对抗过程。作者称该框架可整合进多种传统模型,但摘要未说明具体基础模型、生成器与判别器的参数化方式、离散样本的优化方法及训练目标细节,相关实现尚未验证。 作者报告,在三元组分类与链接预测任务上,该框架优于基线。摘要未提供数据集、数据划分、评价指标、具体基线或提升幅度,因此尚不能判断收益的大小、稳定性及适用范围;实验协议、消融及统计信息尚未验证。复现时需核对负样本候选空间、采样策略与基础模型的对照设置,以及额外训练开销。 本文的主要研究对象是知识图谱,而非 EEG 或 BCI。材料未提供神经信号实验或具体任务对应关系,不能据此认定该方法对 EEG 表示学习有效;已有 EEG 相关工作尚未检索确认。
阅读价值
值得关注其以 GAN 生成负样本、替代随机负采样的机制,以及该机制能否稳定改善知识图谱嵌入;摘要报告了任务收益,但具体对照、提升幅度及训练成本尚未验证。
来源:OpenReview · Representation learning · openreview.net