jieba库的使用
!如何安装jieba?
我们使用cmd命令输入python -m pip install jieba;等一段时间就下好了。
!jieba库有啥用?
就是将中文语句进行分词
!它有几种模式:精确模式、全模式、搜索引擎模式
精确模式:把文本精确地切分开,不存在冗余单词
全模式:把文本中所有可能的词语都扫描出来,有冗余
搜索引擎模式:在精确模式 的基础上,对场次再次切分。
!jieba库常用函数与案例
import jieba str="Tom同学是一个蠢货" s1=jieba.lcut(str)#j精确模式 print(s1) s2=jieba.lcut(str,cut_all=True)#全模式 print(s2) s3=jieba.lcut_for_search(str)#搜索引擎模式 print(s3) s4=jieba.add_word("那是不可能的")#向分词词典增加新词 print(s4)
执行结果:
!在我们的这个实例的演示过程中,我们有的人可能会出现一个情况,就是我们使用jieba库的时候,输出的结果为一串乱码。这个时候,我们的操作方式剋 参考如下的链接:
https://blog.csdn.net/chaofanjun/article/details/88406310?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.control&dist_request_id=7f57040a-e97d-4459-abb0-0f641b16ed4f&depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.control
,也就是在我们原来的python3.sublime-build文件中输入一行:"env": {"PYTHONIOENCODING": "utf8"}#通过这句,使编码一致,都是utf8。就好了。
作者:Tomhard
来源链接:https://www.cnblogs.com/TomHard/p/14449738.html
版权声明:
1、JavaClub(https://www.javaclub.cn)以学习交流为目的,由作者投稿、网友推荐和小编整理收藏优秀的IT技术及相关内容,包括但不限于文字、图片、音频、视频、软件、程序等,其均来自互联网,本站不享有版权,版权归原作者所有。
2、本站提供的内容仅用于个人学习、研究或欣赏,以及其他非商业性或非盈利性用途,但同时应遵守著作权法及其他相关法律的规定,不得侵犯相关权利人及本网站的合法权利。
3、本网站内容原作者如不愿意在本网站刊登内容,请及时通知本站(javaclubcn@163.com),我们将第一时间核实后及时予以删除。