HyperAIHyperAI

Command Palette

Search for a command to run...

Dichte interspezifische Gesichts-Embedding

Seon Joo Kim Seonghyeon Nam Subin Jeon Sejong Yang

Zusammenfassung

Dense Interspecies Face Embedding (DIFE) stellt eine neue Herangehensweise zur Verständnis von Gesichtern verschiedener Tierarten dar, indem gemeinsame Merkmale zwischen Tiergesichtern – einschließlich menschlicher Gesichter – extrahiert werden. Es bestehen drei zentrale Herausforderungen für das Verständnis von Gesichtern über Arten hinweg: (1) der Mangel an Tierdaten im Vergleich zu menschlichen Daten, (2) die unscharfe Verbindung zwischen Gesichtern verschiedener Tierarten und (3) die extreme Variabilität in Form und Stil. Um den Mangel an Daten zu bewältigen, nutzen wir eine Multi-Teacher-Wissens-Distillation basierend auf CSE und StyleGAN2, die keiner zusätzlichen Daten oder Labels bedarf. Anschließend synthetisieren wir sogenannte Pseudopaar-Bilder durch die Exploration des Latentraums von StyleGAN2, um implizite Beziehungen zwischen den Gesichtern verschiedener Tierarten zu identifizieren. Schließlich führen wir eine semantische Matching-Verlustfunktion ein, um die Herausforderung extremer Formunterschiede zwischen Arten zu überwinden. Um unsere Methode quantitativ gegenüber bisherigen Ansätzen wie unsupervisiertem Keypoint-Detection zu bewerten, führen wir einen interspezifischen Keypoint-Transfer auf den Datensätzen MAFL und AP-10K durch. Darüber hinaus werden Ergebnisse für weitere Anwendungen wie interspezifische Gesichtsbildmanipulation und dichte Keypoint-Übertragung präsentiert. Der Quellcode ist unter https://github.com/kingsj0405/dife verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Dichte interspezifische Gesichts-Embedding | Paper | HyperAI