2 个月前

可逆图像重缩放

Xiao, Mingqing ; Zheng, Shuxin ; Liu, Chang ; Wang, Yaolong ; He, Di ; Ke, Guolin ; Bian, Jiang ; Lin, Zhouchen ; Liu, Tie-Yan
可逆图像重缩放
摘要

高分辨率数字图像通常会被缩小以适应各种显示屏幕或节省存储和带宽成本,同时采用后放大技术来恢复原始分辨率或放大图像中的细节。然而,典型的图像缩小过程是非单射映射,因为高频信息的丢失导致逆向放大过程成为一个病态问题,并给从缩小后的低分辨率图像中恢复细节带来了巨大挑战。仅使用图像超分辨率方法进行放大会导致恢复性能不佳。在本研究中,我们提出通过从一个新的视角建模缩小和放大过程来解决这一问题,即一种可逆的双射变换,这可以大大缓解图像放大的病态性质。我们开发了一种具有精心设计框架和目标的可逆重缩放网络(Invertible Rescaling Net, IRN),用于生成视觉效果良好的低分辨率图像,并在缩小过程中利用一个遵循特定分布的潜在变量来捕捉丢失信息的分布。通过这种方式,可以通过将随机抽取的潜在变量与低分辨率图像一起反向传递通过网络来实现放大的可行性。实验结果表明,我们的模型在从缩小后的图像进行放大重建的定量和定性评估方面均显著优于现有方法。