意味的文類似度
意味的類似度評価(Semantic Textual Similarity、STS)は、自然言語処理における重要なタスクで、2つの文章の意味的類似度を1から5のスコア形式で評価することを目的としています。このタスクの主な目標は、テキスト間の意味的距離を計算することで、同じまたは類似した意味を持つ文章ペアを特定することです。STSは情報検索、質問応答システム、テキストクラスタリングなどの分野で広く応用され、これらのシステムの精度と効率を大幅に向上させています。
STS Benchmark
MT-DNN-SMART
MRPC
BERT-Base
MTEB
AnglE-UAE
SICK
SRoBERTa-NLI-large
STS13
Trans-Encoder-BERT-large-bi (unsup.)
STS14
PromCSE-RoBERTa-large (0.355B)
STS12
PromptEOL+CSE+OPT-13B
STS15
SimCSE-RoBERTalarge
STS16
AnglE-LLaMA-13B
SentEval
Snorkel MeTaL(ensemble)
CxC
PromCSE-RoBERTa-large (0.355B)
MRPC Dev
Synthesizer (R+V)
SICK-R