4537

清华大学开放中文词库(THUOCL)

THU Open Chinese Lexicon

词库 文本数据集 文本分类 文本分析 词频

THUOCL(THU Open Chinese Lexicon)是由清华大学自然语言处理与社会人文计算实验室整理推出的一套高质量的中文词库,词表来自主流网站的社会标签、搜索热词、输入法词库等。

免积分下载
数据集市
2019年11月03日
2.6MB

相关数据

Twitter情感分析训练语料库
Twitter情感分析训练语料库
该情感分析数据集 包含1,578,627条分类推文,每行标记... 免积分下载
多领域情感评论文本数据集
多领域情感评论文本数据集
多领域情感数据集包含从Amazon.com获取的部分产品评论... 免积分下载
Euler图学习开源数据集
Euler图学习开源数据集
Euler图学习平台自研算法对应的开源图数据与样本数据 免积分下载

数据介绍

THUOCL(THU Open Chinese Lexicon)是由清华大学自然语言处理与社会人文计算实验室整理推出的一套高质量的中文词库,词表来自主流网站的社会标签、搜索热词、输入法词库等。THUOCL具有以下特点: 包含词频统计信息DF值(Document Frequency),方便用户个性化选择使用。 词库经过多轮人工筛选,保证词库收录的准确性。 开放更新,将不断更新现有词表,并推出更多类别词表。欢迎专业人士加入,协作建设开放词库,有意者请致信thunlp@gmail.com。

该词库可以用于中文自动分词,提升中文分词效果。建议搭配本组研制开发的THULAC工具包使用,提升特定领域中文分词的效果。

分类:

Name Entity Szie Date IT 16000条 2016-12-24 财经 3830条 2016-12-24 成语 8519条 2016-12-24 地名 44805条 2017-06-01 历史名人 13658条 2016-12-24 诗词 13703条 2017-01-20 医学 18749条 2017-01-20 饮食 8974条 2017-04-20 法律 9896条 2017-04-28 汽车 1752条 2017-05-15 动物 17287条 2017-06-01

数据规格

类别数量 11
收集时间 2016~2017
所属单位 清华大学
序号 名称 大小
1 医学 301KB
2 成语 162KB
3 财经 60.8KB
4 动物 313KB
5 饮食 141KB
6 IT 300KB
7 地名 625KB
8 汽车 31.7KB
9 法律 271KB
10 历史名人 159KB
11 诗词 287KB