„Talk The Walk“ ist ein umfangreicher, handlungs- und wahrnehmungsbasierter Konversationsdatensatz. Die Aufgaben in diesem Datensatz umfassen zwei Agenten (einen „Führer“ und einen „Touristen“), die in natürlicher Sprache kommunizieren, um ein gemeinsames Ziel zu erreichen: Touristen dabei zu helfen, zu einem bestimmten Ziel zu navigieren.