HyperAIHyperAI

Command Palette

Search for a command to run...

Überwindung der Grenze des lokalen Fensters: Fortgeschrittener Super-Resolution-Transformer mit adaptivem Token-Wörterbuch

Leheng Zhang Yawei Li Xingyu Zhou Xiaorui Zhao Shuhang Gu

Zusammenfassung

Die Einzelbild-Super-Resolution ist ein klassisches Problem der Computer Vision, das darin besteht, hochauflösende (HR) Bilder aus niedrigauflösenden (LR) Bildern zu schätzen. Obwohl in den letzten Jahren erhebliche Fortschritte bei tiefen neuronalen Netzen (DNNs), insbesondere bei Transformers für die Super-Resolution, erzielt wurden, bestehen weiterhin Herausforderungen, vor allem aufgrund des begrenzten Rezeptivfelds, das durch windowbasierte Selbst-Attention verursacht wird. Um diese Probleme anzugehen, führen wir eine Gruppe von Hilfs-Adaptiven Token-Wörterbüchern für den SR-Transformer ein und stellen eine ATD-SR-Methode vor. Das eingeführte Token-Wörterbuch kann vorherige Informationen aus den Trainingsdaten lernen und diese gelernten Vorkenntnisse durch einen adaptiven Verbesserungsschritt an das jeweilige Testbild anpassen. Diese Verbesserungsstrategie liefert nicht nur globale Informationen für alle Eingabetokens, sondern gruppiert auch die Bilddaten in Kategorien. Auf Basis dieser Kategorisierung schlagen wir zudem eine kategoriengestützte Selbst-Attention-Mechanismus vor, der entfernte, aber ähnliche Tokens nutzt, um die Eingabefeatures zu verbessern. Die experimentellen Ergebnisse zeigen, dass unsere Methode auf verschiedenen Benchmarks für die Einzelbild-Super-Resolution die bestmögliche Leistung erzielt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Überwindung der Grenze des lokalen Fensters: Fortgeschrittener Super-Resolution-Transformer mit adaptivem Token-Wörterbuch | Paper | HyperAI