HyperAIHyperAI

Command Palette

Search for a command to run...

Unüberwachte medizinische Bildübersetzung mit adversarialen Diffusionsmodellen

Muzaffer Özbey Onat Dalmaz Salman UH Dar Hasan A Bedel Şaban Özturk Alper Güngör Tolga Çukur

Zusammenfassung

Die Imputation fehlender Bilder mittels Quell-zu-Ziel-Modalitätsübersetzung kann die Vielfalt in medizinischen Bildgebungsschemata verbessern. Ein verbreiteter Ansatz zur Synthese von Zielbildern basiert auf einer One-Shot-Abbildung mittels generativer adversarialer Netzwerke (GAN). Dennoch können GAN-Modelle, die die Bildverteilung implizit charakterisieren, unter begrenzter Stichprobenfidelität leiden. Hier präsentieren wir eine neuartige Methode namens SynDiff, die auf adversarialer Diffusionsmodellierung basiert und eine verbesserte Leistung bei der medizinischen Bildübersetzung ermöglicht. Um eine direkte Entsprechung der Bildverteilung zu erfassen, nutzt SynDiff einen bedingten Diffusionsprozess, der Rauschen und Quellbilder schrittweise auf das Zielbild abbildet. Zur schnellen und genauen Bildgenerierung während der Inferenz werden große Diffusionsschritte mit adversarialen Projektionen in Richtung umgekehrter Diffusion eingesetzt. Um das Training auf ungepaarten Datensätzen zu ermöglichen, wird eine zykluskonsistente Architektur entworfen, die gekoppelte diffusive und nicht-diffusive Module beinhaltet, die bidirektional zwischen zwei Modalitäten übersetzen. Umfassende Bewertungen werden hinsichtlich der Leistungsfähigkeit von SynDiff gegenüber konkurrierenden GAN- und Diffusionsmodellen bei der mehrkontrastiven MRT sowie der MRT-CT-Übersetzung vorgestellt. Unsere Demonstrationen zeigen, dass SynDiff sowohl quantitativ als auch qualitativ eine überlegene Leistung im Vergleich zu konkurrierenden Baselines erzielt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp