Command Palette

Search for a command to run...

Institutional Books 1.0 图书数据集

日期

5 个月前

机构

论文链接

arxiv.org

加入 Discord 社区

Institutional Books 1.0 是由哈佛大学于 2025 年发布一个不断增长的公有领域书籍语料库,相关论文成果为:「Institutional Books 1.0: A 242B token dataset from Harvard Library’s collections, refined for accuracy and usability」。

该数据集由 983,004 本公有领域书籍组成,书籍涵盖 254 种语言,主要出版于 19 世纪和 20 世纪。该数据集拥有 2420 亿 token 标记、 3.86 亿页文本,有原始和后处理的 OCR 导出两种格式。

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供