HyperAIHyperAI

Command Palette

Search for a command to run...

Konsole
vor 4 Monaten

iiTransformer: Ein einheitlicher Ansatz zur Ausnutzung lokaler und globaler Informationen für die Bildrekonstruktion

{Tammy Lee Hanul Shin Youngchan Song Soo Min Kang}

iiTransformer: Ein einheitlicher Ansatz zur Ausnutzung lokaler und globaler Informationen für die Bildrekonstruktion

Abstract

Das Ziel der Bildrekonstruktion besteht darin, ein hochwertiges Bild aus einer beeinträchtigten Eingabe wiederherzustellen. Obwohl mit Hilfe von Convolutional Neural Networks (CNNs) beeindruckende Ergebnisse bei verschiedenen Aufgaben der Bildrekonstruktion erzielt wurden, beschränkt die Faltungsbetrieb seine Fähigkeit, Informationen außerhalb seines Empfindlichkeitsfeldes zu nutzen. Transformers, die die Selbst-Attention-Mechanismen nutzen, um langreichweitige Abhängigkeiten der Eingaben zu modellieren, haben sich in verschiedenen hochlevel-Vision-Aufgaben als vielversprechend erwiesen. In diesem Paper stellen wir den intra-inter Transformer (iiTransformer) vor, indem wir explizit langreichweitige Abhängigkeiten auf Pixel- und Patch-Ebene modellieren, da sowohl lokale als auch nicht-lokale Merkmalskorrelationen Vorteile bieten. Darüber hinaus präsentieren wir eine lösungsorientierte, randartefaktfreie Methode zur Unterstützung von Bildern beliebiger Größe. Wir zeigen durch umfangreiche Experimente an verschiedenen Aufgaben der Bildrekonstruktion das Potenzial von iiTransformer als allgemein verwendbare Grundarchitektur.

Code-Repositories

Benchmarks

BenchmarkMethodikMetriken
color-image-denoising-on-kodak24-sigma50iiTransformer
PSNR: 28.09
color-image-denoising-on-urban100-sigma25iiTransformer
PSNR: 31.74

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
iiTransformer: Ein einheitlicher Ansatz zur Ausnutzung lokaler und globaler Informationen für die Bildrekonstruktion | Forschungsarbeiten | HyperAI