4ヶ月前

WinoGrande スキーマの対処

Sheng-Chieh Lin; Jheng-Hong Yang; Rodrigo Nogueira; Ming-Feng Tsai; Chuan-Ju Wang; Jimmy Lin
WinoGrande スキーマの対処
要約

AI2 WinoGrande Challengeに取り組むために、T5シーケンス・ツー・シーケンスモデルを適用しました。各例を2つの入力テキスト文字列に分解し、それぞれが仮説を含むように処理しました。そして、「包含関係(entailment)」トークンに割り当てられた確率を仮説の評価値として使用しました。公式リーダーボードへの最初で唯一の提出は2020年3月13日に行われ、AUC(Area Under the Curve)が0.7673となりました。これは当時の最高記録であり、それまでの最先端技術を5ポイント以上上回る結果となっています。

WinoGrande スキーマの対処 | 論文 | HyperAI超神経