HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

PCT-Net: Vollauflösende Bildharmonisierung mittels pixelweise Farbtransformationen

{Björn Stenger Mitsuru Nakazawa Julian Jorge Andrade Guerreiro}

PCT-Net: Vollauflösende Bildharmonisierung mittels pixelweise Farbtransformationen

Abstract

In diesem Paper präsentieren wir PCT-Net, eine einfache und allgemeine Methode zur Bildharmonisierung, die problemlos auf Bilder in voller Auflösung angewendet werden kann. Der zentrale Ansatz besteht darin, ein Parameter-Netzwerk zu lernen, das untersampelte Eingabebilder nutzt, um die Parameter für pixelweise Farbtransformationen (PCTs) vorherzusagen, die dann auf jedes Pixel des Bildes in voller Auflösung angewendet werden. Wir zeigen, dass affine Farbtransformationen sowohl effizient als auch wirksam sind und führende Ergebnisse in der Harmonisierung erzielen. Darüber hinaus untersuchen wir sowohl CNNs als auch Transformers als Parameter-Netzwerke und belegen, dass Transformers zu besseren Ergebnissen führen. Wir evaluieren die vorgeschlagene Methode auf dem öffentlichen, vollauflösenden iHarmony4-Datensatz, der aus vier Datensätzen besteht, und zeigen eine Reduktion der vordergrundbasierten MSE (fMSE)- und der MSE-Werte um mehr als 20 % sowie eine Verbesserung des PSNR-Werts um 1,4 dB, wobei die Architektur dennoch leichtgewichtig bleibt. In einer Benutzerstudie mit 20 Personen zeigen wir, dass die Methode einen höheren B-T-Score erzielt als zwei andere neuere Ansätze.

Benchmarks

BenchmarkMethodikMetriken
image-harmonization-on-iharmony4PCT-Net
MSE: 18.80
PSNR: 39.28
fMSE: 238.27

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
PCT-Net: Vollauflösende Bildharmonisierung mittels pixelweise Farbtransformationen | Forschungsarbeiten | HyperAI