php中文分词nlp,几种常见的PHP中文分词系统
因為要做畢業設計,可能需要相關知識,所以在此總結一下常見的中文分詞系統。
1)HTTPCWS – 基于HTTP協議的開源中文分詞系統
張宴的作品,基于ICTCLAS 3.0 共享版,分詞精度98.45%。可以采用HTTP方式調用借口。
2)SCWS – 簡易中文分詞系統
SCWS 在概念上并無創新成分,采用的是自行采集的詞頻詞典,并輔以一定程度上的專有名稱、人名、地名、數字年代等規則集,經小范圍測試大概準確率在 90% ~ 95% 之間,已能基本滿足一些中小型搜索引擎、關鍵字提取等場合運用。 SCWS 采用純 C 代碼開發,以 Unix-Like OS 為主要平臺環境,提供共享函數庫,方便植入各種現有軟件系統。此外它支持 GBK,UTF-8,BIG5 等漢字編碼,切詞效率高。
3)PhpanAlysis?– PHP無組件分詞系統
PhpanAlysis分詞系統是基于字符串匹配的分詞方法 ,這種方法又叫做機械分詞方法,它是按照一定的策略將待分析的漢字串與一個“充分大的”機器詞典中的詞條進行配,若在詞典中找到某個字符串,則匹配成功(識別出一個詞)。按照掃描方向的不同,串匹配分詞方法可以分為正向匹配 和逆向匹配;按照不同長度優先匹配的情況,可以分為最大(最長)匹配和最小(最短)匹配;按照是否與詞性標注過程相結合,又可以分為單純分詞方法和分詞與標注相結合的一體化方法。
歡迎加入我愛機器學習QQ14群:336582044
微信掃一掃,關注我愛機器學習公眾號
總結
以上是生活随笔為你收集整理的php中文分词nlp,几种常见的PHP中文分词系统的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: C#:继承过程中的静态成员
- 下一篇: 机器学习面试问题