HyperAIHyperAI

Command Palette

Search for a command to run...

LCCC 大型清洁汉语会话语料库

日期

2 年前

大小

939.48 MB

数据集组织

Tsinghua University(清华大学)

发布 URL

github.com

论文 URL

arxiv.org

LCCC(全称为 Large-scale Cleaned Chinese Conversation corpus)由清华大学和三星中国研究院于 2020 年发布。

数据集主要包含两部分:LCCC-base(680 万个对话)和 LCCC-large(1200 万个对话)。研究团队设计了一套严格的数据过滤流程来确保该数据集中对话数据的质量,该流程基于一组规则和一个在手动注释的 110K 个对话对上训练的分类器构建。研究团队所过滤的噪声包括:脏文字、特殊的字符、表情、语法不通的语句、上下文不相关的对话等。清理后的数据集和预训练模型将促进短文本对话建模的研究。

LCCC.torrent
做种 1正在下载 0已完成 316总下载量 564
  • LCCC/
    • README.md
      1.38 KB
    • README.txt
      2.76 KB
      • data/
        • lccc.zip
          939.48 MB

用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供