Last Translation Benchmark는 Vilém Zouhar 등의 연구자가 2026년 기계 번역 모델 평가를 위해 발표한 벤치마크 데이터셋으로, 관련 논문은 「Last Translation Benchmark」입니다. 이 벤치마크는 복잡한 번역 작업에서 현재 기계 번역 모델의 능력을 테스트하고, 실제 환경에서 모델이 실패하는 구체적인 사례를 발견하는 것을 목표로 합니다.

이 데이터셋은 3,456개의 고난도 번역 샘플을 포함하며, 다양한 언어 및 언어 조합을 포괄합니다. 데이터는 수작업으로 작성된 번역 예시와 동료 심사(peer-reviewed)된 번역 예시에서 수집되었습니다. 샘플에는 텍스트, 이미지, 오디오, 비디오 등 멀티모달 입력이 포함되며, 각 샘플에 대해 수작업으로 정의된 검증 규칙이 제공됩니다.

데이터셋 구성

• source_text: 원문 텍스트
• source_lang: 원본 언어
• target_lang: 대상 언어
• source_instructions: 번역 작업에 대한 특별한 요구 사항
• source_media: 선택적 이미지, 오디오 또는 비디오 데이터
• translations: 다양한 모델 또는 수작업으로 생성된 번역 결과
• verification_rules: 번역의 정확성을 판단하기 위한 검증 규칙
• linguistics: 번역의 난이도를 설명하는 언어학적 주석
• attribution: 데이터 출처 정보
• tags: 데이터가 속한 데이터 하위 집합

인용

@misc{zouhar2026translationbenchmark,
  title={Last Translation Benchmark},
  author={LTB},
  year={2026},
  eprint={2609.04173},
  archivePrefix={arXiv},
  url={https://arxiv.org/abs/2609.04173}
}