跳到正文
OpenReview · Representation learning· Keyne Oei; Shujian Yu; Qing Liu; Robert Jenssen·· 10 天前精选AI 评分74

基于多粒度 Cauchy-Schwarz 对比学习的 EHR 表征学习

EHR Representation Learning with Multi-Granularity Cauchy-Schwarz Contrastive Learning

AI 导读

基于摘要分析。该研究面向电子健康记录(EHR)表征学习,提出自监督框架 EHR-CSS,在患者、就诊和医疗编码三个粒度建模关系,旨在弥补掩码重建、未来事件预测及二元正负样本对难以显式表达临床关系的问题。 核心机制是为候选表征构造目标权重:患者与就诊目标依据临床相似度赋权,医疗编码目标依据待重建或预测的编码赋权。各粒度使用 Cauchy-Schwarz Sequence(CSS)损失,将模型在候选表征上的分布与目标分布对齐,并包含候选表征的均匀性项。其方法特点在于以加权关系分布而非仅以二元配对提供监督;相似度定义、分布构造、损失公式及各目标的组合方式尚未验证。 作者报告,在 EHRSHOT 的少样本标签评估和 MIMIC-IV 的全监督微调评估中,EHR-CSS 在所比较方法中取得最佳整体表现。摘要未提供具体任务、指标、数值、划分与基线细节,因此不能判断各任务收益或直接比较两种评估协议。实验协议、消融及统计信息尚未验证。作者表示代码将在论文发表时公开,当前材料不能确认代码已发布或论文已正式发表。 平台推测(待验证):可迁移的机制是假设以软关系分布缓解 EEG 对比学习中二元配对过于粗糙的问题,而非直接沿用 EHR 的临床语义。可尝试复用 CSS 分布对齐与均匀性项,但需重新定义 EEG 样本关系及粒度,并核对关系权重所依赖的监督信息。低信噪比、被试差异、通道不一致和小数据可能使相似度权重偏向噪声或被试身份。一个可证伪的小实验是在固定编码器、数据划分和监督预算下,对比二元对比目标与 CSS 软权重目标的跨被试表现,并检查权重扰动后收益是否稳定;已有 EEG 相关工作尚未检索确认。

阅读价值

值得关注其以临床相似度加权的目标分布替代二元正负样本关系的多粒度对比机制,但具体性能优势及其对 EEG 表征学习的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net