跳到正文
OpenReview · Representation learning· Yuhong He; Long Peng; Lu Wang; Jun Cheng·· 2024-01-01精选AI 评分73

用于单幅图像去雨的潜在退化表征约束

Latent Degradation Representation Constraint for Single Image Deraining

AI 导读

基于摘要分析。本文研究单幅图像去雨中雨纹形状、方向多变,以及退化表征难以与图像内容解耦的问题,提出 Latent Degradation Representation Constraint Network(LDRCNet),通过显式约束退化表征学习,旨在缓解过度或不足增强并保留图像细节。 LDRCNet 由 Direction-Aware Encoder(DAEncoder)、Deraining Network 和 Multi-Scale Interaction Block(MSIBlock)组成。DAEncoder 利用可变形卷积捕捉雨纹方向特性,自适应提取潜在退化表征;训练时引入约束损失,对退化表征学习施加显式约束;MSIBlock 将该表征与去雨网络的解码器特征融合,以支持自适应信息交互。摘要未给出约束损失的具体形式、监督构造和训练细节,尚不能判断其如何确保表征与内容无关。 作者报告,在五个合成数据集和四个真实数据集上的实验达到 state-of-the-art 表现,但摘要未列出数据集名称、划分、指标数值及对照方法,不能据此量化收益或比较不同协议。摘要提供了源代码地址;代码可运行性、实验协议、消融及统计信息尚未验证。 平台推测(待验证):其“显式约束退化表征,再与重建特征交互”的机制可作为 EEG 去伪迹的候选思路,但原论文对象是图像雨纹,不是神经信号。迁移假设依赖于伪迹能够在一定程度上与神经活动解耦,以及具有足够可靠的监督或退化构造。可考虑复用表征约束与特征交互思路,但图像雨纹方向先验及二维可变形卷积需改造成适配时间与通道结构的模块。低信噪比、跨被试或通道变化、小数据条件下,退化表征可能混入任务相关神经活动。一个可证伪的小实验是在固定被试内划分和相同骨干下,对比有无退化表征约束,联合检查伪迹抑制与任务相关 EEG 信息保留;约束形式仍须阅读正文后确定。已有 EEG 相关工作尚未检索确认。

阅读价值

值得核对其显式退化表征约束能否减少内容与退化的耦合,以及约束损失和多尺度交互各自的贡献;摘要支持图像去雨层面的研究价值,但尚不支持 EEG 去伪迹有效性。

来源:OpenReview · Representation learning · openreview.net