跳到正文
OpenReview · Representation learning· Kaiwei Zhang; Dandan Zhu; Xiongkuo Min; Guangtao Zhai·· 2023-01-01精选AI 评分72

用于高光谱图像超分辨率的隐式神经表示学习

Implicit Neural Representation Learning for Hyperspectral Image Super-Resolution

AI 导读

基于摘要分析。该研究面向不使用额外辅助图像的高光谱图像(HSI)超分辨率问题,以隐式神经表示(INR)将 HSI 表达为空间坐标到对应光谱辐亮度值的连续函数,旨在联合表征空间结构与高维光谱信息。 方法上,卷积网络提取图像特征,超网络据此预测参数化模型的参数,使坐标到像素值的连续映射具有内容感知能力;重建过程中还融入周期性空间编码,以恢复高频细节。这里的主要研究对象是高光谱图像,并非 EEG 或 BCI,光谱维也不能直接等同于 EEG 的频率维。 作者报告,在 CAVE、NUS 和 NTIRE2018 三个 HSI 数据集上的实验中,该方法相较于当时的先进方法取得了具有竞争力的重建表现,并开展了各组件作用的消融研究。摘要未提供具体指标、数值、超分辨率倍率、数据划分或对照方法名称;实验协议、消融结果及统计信息尚未验证。网络细节、训练目标和复现资源也需查阅全文确认。 平台推测(待验证):可检验的迁移假设是,内容条件化的连续坐标映射可能用于 EEG 电极空间插值或缺失通道重建,但原方法依赖图像空间结构及多光谱观测,不能直接套用。可复用的部分是超网络条件化与坐标编码思路;需要将图像特征提取和二维坐标改造为适配电极位置、头皮几何及时间信号的表示。低信噪比、稀疏通道、跨被试头部几何差异和小数据可能使连续模型产生不可靠的高频细节。一个小规模可证伪实验是:在固定 EEG 数据划分下遮蔽部分真实电极,以保留电极预测被遮蔽信号,对照常规空间插值,并分别移除超网络与周期性编码,检查信号误差及频谱失真。已有 EEG 相关工作尚未检索确认。

阅读价值

该研究将内容感知的隐式神经表示与周期性空间编码结合用于高光谱图像超分辨率,值得核对其连续重建机制与组件消融,但其对 EEG 非规则空间采样的适用性尚未验证。

来源:OpenReview · Representation learning · openreview.net