17 天前

PQDynamicISP:面向任意图像传感器的感知质量追求型动态可控图像信号处理器

Masakazu Yoshimura, Junji Otsuka, Takeshi Ohashi
PQDynamicISP:面向任意图像传感器的感知质量追求型动态可控图像信号处理器
摘要

全深度神经网络(DNN)架构的图像信号处理器(ISP)近年来受到广泛关注,其在图像质量方面已显著优于传统ISP。与这一主流趋势不同,本文提出了一种轻量级ISP,该架构仅包含简单的传统ISP功能模块,但通过增强表达能力实现了高质量的图像处理效果。具体而言,我们并非对ISP参数进行静态调优,而是提出根据不同的环境条件,甚至在图像局部区域内动态调控参数。实验结果表明,该方法在多个数据集上均达到了当前最优的性能水平,涵盖色调映射、图像增强等多种任务,且模型体积显著小于基于DNN的ISP。此外,本方法通过动态控制机制,可适配多种不同类型的图像传感器,仅需一个统一的ISP即可实现高效处理,而传统方法则需针对每种传感器单独训练。