稀疏噪声图像的表征学习与聚类协同推进
Dual Advancement of Representation Learning and Clustering for Sparse and Noisy Images
基于摘要分析。该研究面向空间基因表达数据等稀疏噪声图像,提出 Dual Advancement of Representation Learning and Clustering(DARLC),将掩码建模、对比学习与聚类整合为端到端框架,目标是协同改善图像表征和聚类质量,而非直接研究 EEG 或 BCI。 机制上,DARLC 通过对比学习增强掩码图像建模得到的表征,并引入聚类分配,缓解对比学习中的“类别碰撞”问题。框架使用基于图注意力网络的技术生成去噪图像,作为更合理的对比学习正视图;同时采用 Student's t mixture model,以提高稀疏噪声图像聚类的稳健性与适应性。图的构建方式、聚类分配如何参与训练、各目标的具体形式及权重尚未验证。 作者报告,在涵盖 12 种稀疏噪声图像数据集的实验中,DARLC 在图像聚类和捕捉基因相互作用的图像表征方面优于所比较的先进方法。摘要未提供具体数据集名称、划分、指标、分数及对照配置,因而不能据此判断提升幅度或跨数据集泛化能力;实验协议、消融及统计信息尚未验证。摘要提供了代码地址,但代码完整性与复现条件尚未核验。 平台推测(待验证):可迁移的机制假设是,以去噪正视图和聚类反馈减轻低信噪比 EEG 表征学习中的伪负样本问题。原方法依赖图像输入、可用的图关系以及聚类结构;用于 EEG 时,需改造输入表征、通道或样本图构建和增强策略。主要风险是去噪抹除任务相关瞬态、聚类捕获被试身份而非任务语义,以及小数据下伪标签误差累积。可在固定跨被试划分和相同训练数据条件下,对比基础掩码建模、加入对比学习、再加入聚类反馈的版本,核对预先指定的任务指标及聚类与被试身份的关联。上述实验仅用于检验迁移假设,已有 EEG 相关工作尚未检索确认。
值得关注 DARLC 如何将聚类分配反馈到对比学习以缓解类别碰撞,并构造去噪正视图;其对 EEG 的适用性尚未验证。
来源:OpenReview · Representation learning · openreview.net