HyperAIHyperAI

Command Palette

Search for a command to run...

SAM2-UNet: Segmentierung von allem 2 macht einen starken Encoder für die Segmentierung natürlicher und medizinischer Bilder

Xinyu Xiong extsuperscript1 extsuperscript* Zihuang Wu extsuperscript2 extsuperscript* Shuangyi Tan extsuperscript3 Wenxue Li extsuperscript4 Feilong Tang extsuperscript5 Ying Chen extsuperscript6 Siying Li extsuperscript7 Jie Ma extsuperscript1 Guanbin Li extsuperscript1 extsuperscript†

Zusammenfassung

Bildsegmentierung spielt eine wichtige Rolle im visuellen Verständnis. Kürzlich haben sich aufstrebende visuelle Grundlagenmodelle kontinuierlich in verschiedenen Aufgaben überzeugend bewährt. Im Anschluss an diesen Erfolg zeigen wir in dieser Arbeit, dass das Segment Anything Modell 2 (SAM2) als leistungsstarker Encoder für U-förmige Segmentierungsmodelle dienen kann. Wir schlagen ein einfaches, aber effektives Framework vor, das SAM2-UNet genannt wird, für vielseitige Bildsegmentierung. Insbesondere verwendet SAM2-UNet den Hiera-Baustein von SAM2 als Encoder, während der Decoder das klassische U-förmige Design nutzt. Zudem werden Adapter in den Encoder eingefügt, um parameter-effizientes Feinjustieren zu ermöglichen. Vorläufige Experimente zu verschiedenen nachgelagerten Aufgaben wie Tarnobjekterkennung, hervorstechende Objekterkennung, Segmentation von Meeresbewohnern, Spiegelerkennung und Polypensegmentierung zeigen, dass unser SAM2-UNet einfach bestehende spezialisierte state-of-the-art-Methoden übertrifft, ohne zusätzliche Tricks oder Verfeinerungen. Projektseite: \url{https://github.com/WZH0120/SAM2-UNet}.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp