WebClick은 멀티모달 모델과 에이전트가 웹 인터페이스를 이해하고, 사용자 명령을 해석하고, 디지털 환경에서 정확한 조치를 취하는 능력을 평가하기 위한 고품질 웹 이해 벤치마크 데이터 세트입니다. 이 데이터 세트에는 100개 이상의 웹사이트에서 가져온 1,639개의 영어 웹페이지 스크린샷이 포함되어 있으며, 정확하게 주석이 달린 자연어 설명과 픽셀 수준의 클릭 대상이 함께 제공됩니다.

데이터 세트 구조:

• agentbrowse(36%): WebVoyager의 웹 검색 작업을 해결할 때 SurferH 에이전트가 발견한 페이지
• humanbrowse(31.8%): 사람들이 일상 업무(e-쇼핑, 여행 계획, 개인 정리)를 수행할 때 상호 작용하는 페이지 및 요소
• 캘린더(32.2%): UI 이해 모델에 대한 알려진 과제인 캘린더 인터페이스의 특수 하위 집합에 초점을 맞춥니다.

소환

@dataset{hcompany2025uinavigate,
author = {H Company Research Team},
title = {WebClick: A Multimodal Localization Benchmark for Web-Navigation Models},
year = {2025},
publisher = {H Company},
}
@misc{andreux2025surferhmeetsholo1costefficient,
title={Surfer-H Meets Holo1: Cost-Efficient Web Agent Powered by Open Weights},
author={Mathieu Andreux and Breno Baldas Skuk and Hamza Benchekroun and Emilien Biré and Antoine Bonnet and Riaz Bordie and Matthias Brunel and Pierre-Louis Cedoz and Antoine Chassang and Mickaël Chen and Alexandra D. Constantinou and Antoine d'Andigné and Hubert de La Jonquière and Aurélien Delfosse and Ludovic Denoyer and Alexis Deprez and Augustin Derupti and Michael Eickenberg and Mathïs Federico and Charles Kantor and Xavier Koegler and Yann Labbé and Matthew C. H. Lee and Erwan Le Jumeau de Kergaradec and Amir Mahla and Avshalom Manevich and Adrien Maret and Charles Masson and Rafaël Maurin and Arturo Mena and Philippe Modard and Axel Moyal and Axel Nguyen Kerbel and Julien Revelle and Mats L. Richter and María Santos and Laurent Sifre and Maxime Theillard and Marc Thibault and Louis Thiry and Léo Tronchon and Nicolas Usunier and Tony Wu},
year={2025},
eprint={2506.02865},
archivePrefix={arXiv},
primaryClass={cs.AI},
url={https://arxiv.org/abs/2506.02865},
}