Python-分词

发表于 | 分类于
字数统计 130 字 | 阅读时长 1 分钟

jieba

Install

$ pip install jieba

Demo

1
2
3
4
5
6
7
8
9
10
11
12
13
14
# encoding=utf-8  
import jieba  

seg_list = jieba.cut("我来到北京清华大学", cut_all=True)  
print("Full Mode: " + "/ ".join(seg_list))  # 全模式  

seg_list = jieba.cut("我来到北京清华大学", cut_all=False)  
print("Default Mode: " + "/ ".join(seg_list))  # 精确模式  

seg_list = jieba.cut("他来到了网易杭研大厦")  # 默认是精确模式  
print(", ".join(seg_list))  

seg_list = jieba.cut_for_search("小明硕士毕业于中国科学院计算所，后在日本京都大学深造")  # 搜索引擎模式  
print(", ".join(seg_list))