HyperAIHyperAI

Command Palette

Search for a command to run...

Part-aware Prompted Segment Anything-Modell für adaptive Segmentation

Chenhui Zhao Liyue Shen

Zusammenfassung

Präzisionsmedizin, wie patientenangepasste Behandlungen unterstützt durch medizinische Bildanalyse, stellt neue Herausforderungen für Segmentierungsalgorithmen dar, insbesondere bei der Anpassung an neue Patienten aufgrund der großen Variabilität zwischen verschiedenen Patienten und der begrenzten Verfügbarkeit von annotierten Daten für jeden einzelnen Patienten. In dieser Arbeit schlagen wir einen dateneffizienten Segmentierungsalgorithmus vor, den wir als Part-aware Prompted Segment Anything Model (P2SAMP^2SAMP2SAM) bezeichnen. Ohne irgendeine Feinabstimmung des Modells ermöglicht P2SAMP^2SAMP2SAM eine nahtlose Anpassung an neue Patienten, die nur auf einstufigen, patientenspezifischen Daten basiert. Wir führen einen neuartigen part-aware Prompt-Mechanismus ein, um mehrere Punktprompts basierend auf den teilbezogenen Merkmalen der einstufigen Daten auszuwählen. Dieser Mechanismus kann weitreichend in verschiedene promptfähige Segmentierungsmodelle integriert werden, wie zum Beispiel SAM und SAM 2 (Segment Anything Model). Um die optimale Anzahl von Teilen für jeden spezifischen Fall zu bestimmen, schlagen wir einen verteilungsgeführten Retrieval-Ansatz vor, der die Robustheit des part-aware Prompt-Mechanismus weiter verbessert. P2SAMP^2SAMP2SAM erhöht die Leistungsfähigkeit um +8,0 % und +2,0 % im Durchschnittlichen Dice-Koeffizienten für zwei unterschiedliche patientenangepasste Segmentierungsanwendungen. Darüber hinaus zeigt P2SAMP^2SAMP2SAM auch beeindruckende Generalisierungsfähigkeiten in anderen adaptiven Segmentierungsaufgaben im Bereich natürlicher Bilder, z.B. +6,4 % mIoU (mean Intersection over Union) in der personalisierten Objektsegmentierungsaufgabe. Der Quellcode ist unter folgendem Link verfügbar: https://github.com/Zch0414/p2sam


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp