文章目录 一.概述二.jieba库使用三.实例
一.概述
1.jieba库概述
jieba库是一个重要的第三方中文分词函数库,不是安装包自带的,需要通过pip指令安装
1.库函数
jieba.cut(s)——精确模式,返回一个可迭代数据类型
jieba.cut(s,cut_all=True)——全模式,输出文本s中可能的单词
jieba.cut_for_search(s)——搜索引擎模式,适合搜索引擎建立索引的分词结果
jieba.lcut(s,cut_all=True)——全模式,返回列表类型
jieba.lcut_for_search(s)——搜索引擎模式,返回列表类型
jieba.add_word(w)——向分词词典中增加新词w
2.使用
import jiebalist(jieba.cut("中华人民共和国是一个伟大的国家"))转化为列表类型#结果为['中华人民共和国','是','一个','伟大','的','国家'] import jiebalist(jieba.cut("中华人民共和国是一个伟大的国家"),True)#结果为['中华','人民','共和','中华人民'........]找出所有可能的单词使用jieba.lcut直接返回列表类型
三.实例 import jiebatxt=open("E:\从百草园到三味书屋.txt","r",encoding='utf-8').read()words=jieba.lcut(txt)counts={}for word in words: counts[word]=counts.get(word,0)+1items=list(counts.items())items.sort(key=lambda x:x[1],reverse=True)for i in range(20): word,count=items[i] print("{0:<10}{1:>6}".format(word,co