跳到正文
OpenReview · Representation learning· Wenlin Li; Yucheng Xu; Xiaoqing Zheng; Suoya Han; Jun Wang; Xiaobo Sun·· 2024-01-01精选AI 评分72

稀疏含噪图像的表征学习与聚类协同推进

Dual Advancement of Representation Learning and Clustering for Sparse and Noisy Images

AI 导读

基于摘要分析。本文研究空间基因表达数据等稀疏含噪图像的表征学习与聚类问题,提出 Dual Advancement of Representation Learning and Clustering(DARLC),将掩码建模、对比学习与聚类分配纳入端到端框架。其主要研究对象是稀疏含噪图像,而非 EEG 或 BCI 信号。 机制上,DARLC 通过对比学习增强掩码图像建模得到的表征,并利用聚类分配缓解对比学习中的“类别碰撞”问题,即语义相近的样本可能被当作负样本。框架还使用基于图注意力网络的技术生成去噪图像,作为对比学习的正视图,并采用 Student's t mixture model 进行聚类。作者将这些设计的作用概括为增强局部感知、表征区分性与关系语义理解;具体损失形式、图构建方式及模块间优化关系尚未验证。 作者报告,在涵盖 12 种稀疏含噪图像数据集类型的实验中,DARLC 在图像聚类及捕捉基因相互作用的图像表征方面优于所比较的先进方法。摘要未提供具体数据集名称、划分、指标、分数或基线配置,因此无法判断收益幅度及不同场景下的稳定性。材料提供了代码仓库地址,但实现、运行条件、消融及统计信息尚未验证。 平台推测(待验证):其潜在 EEG 对应点在于低信噪比条件下的正视图构造,以及避免将同类脑活动误作负样本;这依赖 EEG 能否被转换为保留任务语义的图像或图结构。可考虑复用聚类辅助对比学习思路,但需改造通道关系建图与去噪增强;低信噪比、小样本和跨被试差异可能使去噪抹去有效信号,或使聚类主要反映被试身份。一个可检验的小实验是在固定跨被试划分下,对照同一表征基线、加入聚类反馈及再加入去噪正视图,检验任务表征是否改善并核对被试身份混杂。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对 DARLC 如何将聚类分配反馈到对比学习以缓解类别碰撞,以及图注意力去噪能否保留有效结构;其在 EEG 上的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net