18 天前

SPLADE-v3:SPLADE 的新基线

Carlos Lassance, Hervé Déjean, Thibault Formal, Stéphane Clinchant
SPLADE-v3:SPLADE 的新基线
摘要

作为最新版SPLADE库发布的重要配套内容,本文介绍了训练结构的改进,并推出了最新的SPLADE系列模型——SPLADE-v3。我们将其与BM25、SPLADE++以及重排序器(re-rankers)进行了对比,并通过覆盖40多个查询集的元分析(meta-analysis)展示了其卓越的性能表现。SPLADE-v3进一步拓展了SPLADE模型的性能边界:在统计上显著优于BM25和SPLADE++,同时在性能上可与交叉编码器(cross-encoder)重排序器相媲美。具体而言,SPLADE-v3在MS MARCO开发集上的MRR@10指标超过40,且在BEIR基准测试的跨域任务上实现了2%的性能提升。

SPLADE-v3:SPLADE 的新基线 | 最新论文 | HyperAI超神经