跳到正文
OpenReview · State space models· Alberto Presta; Attilio Fiandrotti; Enzo Tartaglione; Marco Grangetto·· 2023-01-01精选AI 评分73

面向学习式图像压缩的可微熵模型

A Differentiable Entropy Model for Learned Image Compression

AI 导读

基于摘要分析。本文研究端到端学习式图像压缩中的码率估计问题,提出一种非参数、可微的熵模型,在训练期间估计量化潜空间的统计频率,作为率失真(RD)目标中的码率代理,并支持无需重训练的上下文适配。 原框架由编码器将图像映射至低维、量化潜空间,再由解码器重建图像;训练同时考虑重建失真与潜变量码率。与依赖辅助神经网络估计码率的方法不同,本文以潜变量的统计频率构造熵模型,并使其能够参与梯度优化。摘要未披露频率估计的可微化方式、上下文定义及更新规则,不能据此判断具体实现。 作者报告,在摘要所述图像压缩实验中,该方法与学习式码率估计器表现相当,在时间上下文中适配后表现更好;但摘要未提供数据集、率失真指标、实际码流长度、对照配置或数值。实验协议、消融及统计信息尚未验证,尤其需核对码率代理与实际编码开销的一致性,以及上下文更新带来的计算和存储成本。 平台推测(待验证):若用于 EEG 传输或存储压缩,可复用的部分是对量化潜变量分布的可微估计与上下文更新,而非直接复用图像编码器。该假设依赖 EEG 编码器产生可量化潜变量,以及局部时间上下文具有可利用的统计规律;仍需改造编码器、失真目标与上下文策略。低信噪比、跨被试或通道变化可能使频率估计失配,小数据也可能使适配不稳定。可在固定 EEG 编解码器与数据划分下,对比非参数熵模型和学习式码率估计器,检验相同重建失真下的实际码率,并核查下游任务信息是否保留。已有 EEG 相关工作尚未检索确认,原文结果不能作为 BCI 有效性的证据。

阅读价值

该工作值得关注之处是以可微、非参数的量化潜变量频率估计替代学习式码率估计器,并探索无需重训练的上下文适配;其适配收益与复现条件仍需全文核对。

来源:OpenReview · State space models · openreview.net