FRGC steht für Face Recognition Grand Challenge. Der Datensatz besteht aus 50.000 Bildern, aufgeteilt in Trainingssatz und Validierungssatz. Der Trainingssatz wird zum Trainieren des Algorithmus verwendet und der Validierungssatz wird verwendet, um die Leistung der Methode in einer Laborumgebung zu bewerten. Der Validierungssatz enthält Daten aus 4.003 Probandensitzungen.

Eine Subjektsitzung ist die Gesamtheit aller Bilder einer Person, die bei der Erfassung ihrer biometrischen Daten aufgenommen werden. Sie besteht aus vier kontrollierten Standbildern, zwei unkontrollierten Standbildern und einem dreidimensionalen Bild. Die kontrollierten Bilder wurden in einem Studio aufgenommen und waren Frontalaufnahmen von zwei Gesichtsausdrücken (lächelnd und neutral), die unter zwei Lichtbedingungen aufgenommen wurden. Ein 3D-Bild besteht aus Entfernungs- und Texturbildern. Die 3D-Bilder wurden mit einem Sensor der Minolta Vivid 900/910-Serie aufgenommen.