關于分詞器的比較和選擇，可以看這篇文章：Lucene的各中文分詞比較

doToken()方法可以對傳入的字符串進行分詞

/***** @param ts 需要拆詞的字符串* @return* @throws IOException*/public static List<String> doToken(TokenStream ts) throws IOException {List<String> stringList = new ArrayList<>();ts.reset();CharTermAttribute cta = ts.getAttribute(CharTermAttribute.class);while (ts.incrementToken()) {stringList.add(cta.toString());}System.out.println();ts.end();ts.close();return stringList;}

總結

以上是生活随笔為你收集整理的lucene实现全文检索（四）：分词器的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。