Command Palette

Search for a command to run...

3달 전

GeoQuestions1089 데이터셋을 활용한 지공간 질의응답 엔진의 벤치마킹

{Pierre Maret Manolis Koubarakis Myrto Tsokanaridou Michail Mitsios Mariangela Pollali Konstantinos Plas Eleni Tsalapati Dharmen Punjani Sergios-Anestis Kefalidis}

GeoQuestions1089 데이터셋을 활용한 지공간 질의응답 엔진의 벤치마킹

초록

지오공간 질문 답변 엔진의 성능 평가를 위한 데이터셋인 GeoQuestions1089을 제안한다. GeoQuestions1089는 현재까지 공개된 최대 규모의 지오공간 질문 답변 데이터셋으로, 총 1,089개의 질문, 각 질문에 해당하는 GeoSPARQL 또는 SPARQL 쿼리, 그리고 지오공간 지식 그래프 YAGO2geo 기반의 답변을 포함하고 있다. 본 연구에서는 GeoQA2(우리 연구팀이 개발한 GeoQA의 확장 버전)와 Hamzei 등(2022)이 제안한 시스템의 효율성과 효과성을 평가하기 위해 GeoQuestions1089를 활용한다.

벤치마크

벤치마크방법론지표
question-answering-on-geoquestions1089Hamzei et al.
Percentage correct: 19.04%
question-answering-on-geoquestions1089GeoQA2
Percentage correct: 38.28%

AI로 AI 구축

아이디어에서 출시까지 — 무료 AI 공동 코딩, 즉시 사용 가능한 환경, 최적 가격 GPU로 AI 개발을 가속화하세요.

AI 공동 코딩
즉시 사용 가능한 GPU
최적 가격
시작하기

Hyper Newsletters

최신 정보 구독하기
한국 시간 매주 월요일 오전 9시 에 이번 주의 최신 업데이트를 메일로 발송합니다
이메일 서비스 제공: MailChimp
GeoQuestions1089 데이터셋을 활용한 지공간 질의응답 엔진의 벤치마킹 | 연구 논문 | HyperAI초신경