jieba 分词的三种模式
生活随笔
收集整理的這篇文章主要介紹了
jieba 分词的三种模式
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
Jieba 是一個強大的分詞庫,完美支持中文分詞,做為最好的 Python 中文分詞組件。
安裝:pip install jieba
特點:支持三種分詞模式:
1、精確模式,試圖將句子精確的分開,適用于文本分析。
cut_all參數默認為False,所有使用cut方法時默認為精確模式。
import jieba strings = '今天天氣真好' seg = jieba.cut(strings,cut_all=False) print(','.join(seg)) output : 今天天氣,真,好2、全模式,把句子中所有可以成詞的詞語都掃描出來,速度非常快,但是不能解決歧義。
cut_all參數為True
import jieba strings = '今天天氣真好' seg = jieba.cut(strings,cut_all=True) print(','.join(seg)) output : 今天,今天天氣,天天,天氣,真好3、搜索引擎模式,在精確模式的基礎上,對長詞再次切分,提高召回率,適用于搜索引擎分詞。
調用jieba.cut_for_search(值)方法
import jieba strings = '今天天氣真好' seg = jieba.cut_for_search(strings) print(','.join(seg)) output : 今天,天天,天氣,今天天氣,真,好?
總結
以上是生活随笔為你收集整理的jieba 分词的三种模式的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 数据分析基于朴素贝叶斯的书籍评价信息分类
- 下一篇: 基于朴素贝叶斯的书籍评价信息分类