17 天前

基于CLIP-傅里叶引导小波扩散的低光照图像增强

Minglong Xue, Jinhong He, Wenhai Wang, Mingliang Zhou
基于CLIP-傅里叶引导小波扩散的低光照图像增强
摘要

低光照图像增强技术已取得显著进展,但图像质量恢复不稳定以及视觉感知效果不理想仍是亟待解决的关键挑战。为应对这些问题,本文提出一种新颖且鲁棒的低光照图像增强方法——基于CLIP-傅里叶引导小波扩散(CLIP-Fourier Guided Wavelet Diffusion,简称CFWD)。具体而言,CFWD利用多小波变换在频域空间中构建的多模态视觉-语言信息,指导图像增强过程。通过跨不同模态的多尺度监督机制,有效实现了小波扩散过程中图像特征与语义特征的对齐,从而显著缩小退化图像域与正常图像域之间的差距。此外,为进一步提升图像细节的恢复能力,本文结合基于小波变换的傅里叶变换,设计了一种混合高频感知模块(Hybrid High Frequency Perception Module, HFPM),该模块对细节特征具有显著的感知能力。通过引导增强结果的细粒度结构恢复,HFPM有效缓解了小波扩散过程中的特征混淆问题,实现了在客观指标与主观视觉质量上的双重优化。在多个公开的真实世界基准数据集上进行的大量定量与定性实验表明,所提方法显著优于现有最先进方法,在图像质量提升与噪声抑制方面均取得了实质性进展。项目代码已开源,可访问 https://github.com/hejh8/CFWD。