Part-aware Panoptische Segmentierung

In dieser Arbeit stellen wir die neue Szeneverstehensaufgabe der Teilebewussten Panoramasegmentierung (Part-aware Panoptic Segmentation, PPS) vor. Diese Aufgabe zielt darauf ab, eine Szene auf mehreren Abstraktionsebenen zu verstehen und vereint die Aufgaben der Szenenanalyse und der Teileanalyse. Für diese neuartige Aufgabe liefern wir konsistente Annotationen für zwei häufig verwendete Datensätze: Cityscapes und Pascal VOC. Darüber hinaus präsentieren wir ein einziges Metrik zur Bewertung von PPS, das als Teilebewusste Panoramakualität (Part-aware Panoptic Quality, PartPQ) bezeichnet wird. Mit Hilfe dieser neuen Metrik und Annotationen legen wir mehrere Baseline-Modelle durch die Kombination von Ergebnissen bestehender Methoden für die Panoramasegmentierung und die Teilesegmentierung fest. Schließlich führen wir verschiedene Experimente durch, um die Bedeutung der verschiedenen Abstraktionsebenen innerhalb dieser einzelnen Aufgabe zu bewerten.