跳到正文
OpenReview · State space models·· 2026-09-02精选AI 评分75

先草图后像素:面向真实世界超分辨率的像素空间结构强制策略

Sketch Before Pixel: Pixel-Space Structure Forcing for Real-World Super-Resolution

AI 导读

基于摘要分析。本文研究真实世界图像超分辨率(Real-SR),提出 Sketch2Pix:一种不使用 VAE 的像素空间 Diffusion Transformer,通过先恢复结构、再生成细节,缓解单一去噪轨迹中结构重建与细节生成耦合带来的联合优化难题。 核心机制包括 Dual-Time Joint Diffusion 与 Structure-Forcing Schedule。前者依据自然图像的低维流形假设,联合预测干净的低频结构与图像,实现端到端像素空间恢复;后者重新安排结构与像素的去噪轨迹,显式控制恢复顺序,使结构更早形成并引导后续像素生成。作者报告,在图像精修前进行适度结构恢复有助于改善恢复质量。与依赖 VAE 压缩的路径相比,该方法旨在避免有损压缩;与摘要所述常规像素空间生成方法相比,其主要区别是将耦合恢复改为有序的结构到细节过程。 作者报告,在 Real-SR 基准实验中,Sketch2Pix 能恢复感知上真实的细节、保持结构内容,并实现高效推理。但摘要未提供基准名称、数据划分、评价指标、数值、对照方法或推理硬件,无法据此判断改善幅度及效率优势。结构表示的构造、双时间变量的关系、损失形式、调度实现、消融及统计信息尚未验证。 平台推测(待验证):若 EEG 恢复任务具有可分离的粗尺度结构与细节,结构优先的恢复顺序可能成为研究假设,但自然图像的低维流形假设不能直接套用于 EEG。可复用的是顺序控制思路,需改造结构定义、信号表示及噪声过程;低信噪比、通道差异、跨被试变化和小数据可能导致早期错误结构约束后续恢复,并抹去有意义的瞬态活动。一个可检验的小实验是在固定 EEG 划分和匹配模型容量下,对比同步去噪与结构优先去噪,检查信号恢复及下游任务表现,而非仅观察平滑程度。相关 EEG 工作尚未检索确认,本文摘要不提供 BCI 有效性的证据。

阅读价值

值得核对其如何通过双时间扩散与去噪调度实现结构先于细节的像素空间恢复,以及这一顺序控制相对常规联合去噪的独立贡献;摘要尚不足以验证性能与推理效率。

来源:OpenReview · State space models · openreview.net