Aktionserwartung mit Zielkonsistenz

In diesem Artikel behandeln wir das Problem der kurzfristigen Aktionsvorhersage, d. h., wir möchten eine bevorstehende Aktion eine Sekunde vor ihrem Eintritt vorhersagen. Wir schlagen vor, hochwertige Absichtsinformationen zu nutzen, um zukünftige Aktionen vorherzusagen. Dazu integrieren wir eine zusätzliche Zielvorhersagezweig in unser Modell und schlagen eine Konsistenzverlustfunktion vor, die die vorhergesagten Aktionen dazu anregt, der hochwertigen Zielsetzung im Video zu entsprechen. In unseren Experimenten zeigen wir die Wirksamkeit des vorgeschlagenen Ansatzes und demonstrieren, dass unsere Methode auf zwei großen Datensätzen, Assembly101 und COIN, Ergebnisse auf aktuellem Stand der Technik erzielt.