Command Palette
Search for a command to run...
{Pierre Maret Manolis Koubarakis Myrto Tsokanaridou Michail Mitsios Mariangela Pollali Konstantinos Plas Eleni Tsalapati Dharmen Punjani Sergios-Anestis Kefalidis}

要約
地理空間質問応答エンジンのベンチマーク評価を目的として、GeoQuestions1089データセットを提示する。GeoQuestions1089は現在入手可能な最大規模の同種データセットであり、YAGO2geoという地理空間知識グラフ上で実行可能な1089の質問、それらに対応するGeoSPARQLまたはSPARQLクエリ、およびその答えを含んでいる。本研究では、GeoQuestions1089を用いて、本研究グループが開発したGeoQAの拡張版であるGeoQA2およびHamzeiら(2022年)のシステムの有効性と効率性を評価する。
ベンチマーク
| ベンチマーク | 方法論 | 指標 | 
|---|---|---|
| question-answering-on-geoquestions1089 | Hamzei et al. | Percentage correct: 19.04%  | 
| question-answering-on-geoquestions1089 | GeoQA2 | Percentage correct: 38.28%  |