BDD-X steht für Berkeley Deep Drive-X (eXplanation) und besteht aus 6.970 Fahrvideos mit einer Gesamtlänge von über 77 Stunden. Die Videos werden unter verschiedenen Fahrbedingungen aufgenommen, beispielsweise Tag/Nacht, Autobahn/Stadt/Land, Sommer/Winter usw.

Jedes Video ist durchschnittlich 40 Sekunden lang und enthält etwa 3–4 Aktionen wie Beschleunigen, Abbremsen, Rechtsabbiegen usw., die alle beschrieben und erklärt werden. Der Datensatz enthält 26.000 Aktivitäten über 8,4 Millionen Frames.