跳到正文
OpenReview · Representation learning· Kyuyong Shin; Wonyoung Shin; Jung-Woo Ha; Sunyoung Kwon·· 2021-01-01精选AI 评分72

用于丰富图表示的图、实体与步数混合

Graphs, Entities, and Step Mixture for Enriching Graph Representation

AI 导读

基于摘要分析。本文研究通用图结构数据的表示学习,针对图神经网络随邻域聚合加深而出现的节点表示过平滑,以及固定图上的传导学习难以泛化至未见图的问题,提出 Graph Entities with Step Mixture via random walk(GESM)。其主要研究对象是图表示,并非 EEG 或 BCI。 机制上,GESM 同时考虑基于边的邻域关系与基于节点的实体特征:通过随机游走混合不同步数的信息以缓解过平滑,利用注意力机制根据节点信息动态反映节点间关系,并加入基于结构的正则化以增强嵌入表示。摘要未提供步数混合的具体形式、注意力计算方式、正则化目标及训练细节,这些内容尚未验证。 作者报告,在八个图基准数据集的传导学习与归纳学习任务中,GESM 达到最先进或相当的性能,并通过实验展示了缓解过平滑、保留丰富图表示的效果。摘要未列出数据集名称、划分、对照方法、指标与具体数值,因此不能据此比较性能增益或判断跨图泛化范围。实验协议、消融及统计信息尚未验证。作者提供了源码链接,但代码可运行性与复现条件尚未验证。 平台推测(待验证):若将 EEG 通道及其关系构成图,多步信息混合可能用于检验深层图聚合造成的通道表示趋同问题。可复用部分是随机游走多步混合与结构正则化思路;需另行确定节点特征、连接构造及跨被试图对应关系。低信噪比可能使错误连接经随机游走扩散,通道差异和小样本也可能削弱泛化。一个可证伪的小实验是在固定 EEG 任务、图构造与跨被试划分下,对比单一步数与多步混合,在控制其他训练条件的前提下同时观察任务表现和节点表示相似度;原领域结果不构成 EEG 有效性的证据,已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对 GESM 的随机游走多步混合能否在保留局部信息的同时缓解过平滑,以及其归纳学习评估如何支持对未见图的泛化;摘要尚不足以判断其对 EEG 图建模的有效性。

来源:OpenReview · Representation learning · openreview.net