Robotic Pushing est un ensemble de données de prédiction vidéo pour les interactions du monde réel. Pour explorer les interactions du monde réel, l'ensemble de données contient 59 000 interactions de robots impliquant des actions de poussée.

Dans cet ensemble de données, prédire avec précision la vidéo en fonction de la prochaine action du robot équivaut à apprendre une « imagination visuelle » du futur en fonction de différents plans d’action.