Lippenstift reicht nicht aus: Über Farbanpassung hinaus für die Makeup-Übertragung im echten Leben

Das Auftragen von Schminke (makeup transfer) ist die Aufgabe, den Schminkstil aus einem Referenzbild auf ein Quellgesicht anzuwenden. Reale Schminke ist vielfältig und extravagant, was nicht nur Farbänderungen, sondern auch Muster wie Aufkleber, Rouge und Schmuck umfasst. Bestehende Arbeiten haben jedoch diese letzteren Komponenten vernachlässigt und den Transfer von Schminke auf die Farbanpassung beschränkt, wobei sie sich ausschließlich auf leichte Schminkstile konzentrierten. In dieser Arbeit schlagen wir einen umfassenden Framework für den Schminketransfer vor, der alle genannten Schminkkomponenten verarbeiten kann. Er besteht aus einer verbesserten Farbübertragungs- und einer neuen Musterübertragungszweige, um alle Schminkeigenschaften zu erlernen, einschließlich Farbe, Form, Textur und Position. Um ein solches System zu trainieren und zu evaluieren, stellen wir auch neue Datensätze für reale und synthetische extreme Schminke vor. Experimentelle Ergebnisse zeigen, dass unser Framework sowohl bei leichten als auch bei extremen Schminkstilen eine Spitzenleistung erzielt. Der Code ist unter https://github.com/VinAIResearch/CPM verfügbar.