Applications simples de BERT pour la recherche de documents ad hoc

Suite aux récents succès de l'application de BERT à la réponse aux questions, nous explorons des applications simples à la recherche ad hoc de documents. Cette démarche a nécessité de relever le défi posé par des documents généralement plus longs que la longueur d'entrée pour laquelle BERT a été conçu. Nous abordons cette question en appliquant l'inférence sur les phrases individuellement, puis en agrégant les scores des phrases pour produire des scores de documents. Les expérimentations menées sur les collections de tests TREC Microblog et Newswire montrent que notre approche est simple mais efficace, puisque nous rapportons la meilleure précision moyenne sur ces jeux de données parmi les approches neuronales dont nous avons connaissance.