跳到正文
OpenReview · Representation learning· Yuhong He; Long Peng; Lu Wang; Jun Cheng·· 2023-01-01精选AI 评分71

用于单幅图像去雨的潜在退化表征约束

Latent Degradation Representation Constraint for Single Image Deraining

AI 导读

基于摘要分析。该研究针对单幅图像去雨中雨纹形状、方向多变,以及退化信息与图像内容耦合的问题,提出 Latent Degradation Representation Constraint Network(LDRCNet),以显式约束学习退化表征,并将其用于指导图像恢复。主要研究对象是图像去雨,而非 EEG 或 BCI。 机制上,LDRCNet 包含 Direction-Aware Encoder(DAEncoder)、UNet Deraining Network 和 Multi-Scale Interaction Block(MSIBlock)。DAEncoder 利用可变形卷积捕捉雨纹的方向一致性,自适应提取潜在退化表征;训练时引入约束损失,对退化表征学习施加显式约束;MSIBlock 则融合退化表征与去雨网络的解码器特征,实现自适应信息交互。相较于仅依靠复杂模块隐式学习退化信息的方法,其核心思路是显式约束内容无关的退化因素,以缓解过度或不足增强。约束损失的具体形式及解耦效果尚未验证。 作者报告,在合成与真实数据集上的实验达到新的最先进性能;但摘要未提供数据集名称、划分、指标、数值及对照方法,无法据此判断优势幅度与适用边界。训练监督、实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的假设是,在具有可分离伪迹因素的 EEG 去噪任务中,显式约束伪迹表征可能比隐式恢复更便于检验信号与伪迹的分离。但雨纹的空间方向一致性并不直接对应 EEG 伪迹,DAEncoder 与 MSIBlock 需改造为适合时序及通道结构的模块;原方法是否依赖成对干净图像、何种监督及数据规模,仍需核对。低信噪比、跨被试及通道配置变化、小样本条件下,表征可能混入有用神经活动。可先在固定划分的干净 EEG 与可控伪迹混合数据上,对比加入和移除表征约束的同一恢复模型,同时检验去噪效果与任务相关信号保留情况。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对的是 LDRCNet 如何通过显式约束将退化表征与图像内容解耦,以及这种约束是否确实缓解过度或不足增强;摘要中的性能结论仍需结合实验协议与消融验证。

来源:OpenReview · Representation learning · openreview.net