英文文本分詞

1、知識準備
（1）Python中的split()函數的用法
了解split()的基本用法

（2）python多個分割符split字符串
了解re庫的部分用法

Python strip() 方法用于移除字符串頭尾指定的字符（默認為空格或換行符）或字符序列。

注意：該方法只能刪除開頭或是結尾的字符，不能刪除中間部分的字符。

2、實踐代碼
將英文句子分詞，并記錄通過字典的方式記錄每個詞語的出現頻數。

import retext="Today I will do what others won’t,\so tomorrow I can accomplish what others can’t. " array=re.split('[ ,.]',text) print(array)dic={} for i in array:if i not in dic:dic[i] = 1else:dic[i] += 1 print(dic)

3、實踐代碼結果

總結

以上是生活随笔為你收集整理的【Python】英文文本分词与词频统计（split()函数、re库）的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。