UserBench a été proposé conjointement par l'équipe de recherche en IA de Salesforce et l'Université de l'Illinois à Urbana-Champaign en juillet 2025, et les résultats de recherche pertinents ont été publiés dans l'article «UserBench : un environnement de gym interactif pour les agents centrés sur l’utilisateur".

UserBench est un banc d'essai centré sur l'utilisateur, conçu pour évaluer les performances des agents lors d'interactions complexes et orientées vers leurs préférences. Dans UserBench, des utilisateurs simulés fournissent des instructions initiales vagues, révélant progressivement leurs préférences, souvent implicitement. Les agents doivent clarifier proactivement leurs objectifs, interpréter les indices subtils et réussir grâce à des outils de raisonnement adaptatifs. Basé sur le framework Gymnasium, UserBench offre une configuration modulaire et évolutive avec des interfaces d'interaction standardisées et un backend stable pour l'utilisation des outils, permettant une évaluation rigoureuse et reproductible.