FF-Former : Swin Fourier Transformer pour la suppression des éclats nocturnes

Dans le processus de suppression des éclats nocturnes, il est essentiel de disposer d’un champ réceptif étendu, étant donné que ces éclats peuvent occuper une part importante d’une image, voire l’ensemble de celle-ci. Toutefois, les approches classiques basées sur les fenêtres dans les Transformers restreignent le champ réceptif à l’intérieur de chaque fenêtre, ce qui limite leur capacité à capturer des caractéristiques globales. De plus, les éclats peuvent rendre les régions sombres plus lumineuses, entraînant une perte de contraste et une altération des caractéristiques fréquentielles de l’image. Pour relever ces défis, nous proposons FF-Former, une architecture fondée sur la convolution rapide par transformation de Fourier (Fast Fourier Convolution, FFC), conçue pour extraire des caractéristiques fréquentielles globales afin d’améliorer la suppression des éclats nocturnes. Pour atteindre cet objectif, nous intégrons un bloc de fréquence spatiale (Spatial Frequency Block, SFB) après le Swin Transformer, formant ainsi le bloc Swin Fourier Transformer (SFTB). Cette configuration permet d’établir des dépendances à longue portée et d’extraire efficacement des caractéristiques globales. Contrairement au Transformer traditionnel, qui repose sur une attention auto-globale, le module SFB n’effectue que des opérations de convolution, ce qui le rend à la fois efficace et performant. En outre, pendant la phase d’entraînement, nous optimisons la fonction de perte afin de préserver les points de source lumineuse après la suppression des éclats nocturnes. Les résultats expérimentaux sur des benchmarks réels et synthétiques démontrent que le FF-Former proposé améliore significativement les performances de suppression des éclats nocturnes.