近期，須要將漢字與字符的非常合串作為combine的輸出的key，

這樣做是希望，利用hadoop的歸并來依照key進行分組，然后，在reduce階段，拿到的都是一個一個組。

可是，發現，這樣的，漢字混合的傳做key，居然，在reduce階段中，接受的的key并非唯一的，于是，考慮利用轉碼來實現。

終于，問題攻克了。

package test.com.gjob.services; import java.util.Properties; public class Test { public static void main(String[] args) { String s = "簡單介紹"; String tt = gbEncoding(s); // String tt1 = "你好，我想給你說一個事情"; System.out.println(decodeUnicode("\\u7b80\\u4ecb")); // System.out.println(decodeUnicode(tt1)); System.out.println(HTMLDecoder.decode("中國")); String s1 = "\u7b80\u4ecb"; System.out.println(s.indexOf("\\")); } public static String gbEncoding(final String gbString) { char[] utfBytes = gbString.toCharArray(); String unicodeBytes = ""; for (int byteIndex = 0; byteIndex < utfBytes.length; byteIndex++) { String hexB = Integer.toHexString(utfBytes[byteIndex]); if (hexB.length() <= 2) { hexB = "00" + hexB; } unicodeBytes = unicodeBytes + "\\u" + hexB; } System.out.println("unicodeBytes is: " + unicodeBytes); return unicodeBytes; } public static String decodeUnicode(final String dataStr) { int start = 0; int end = 0; final StringBuffer buffer = new StringBuffer(); while (start > -1) { end = dataStr.indexOf("\\u", start + 2); String charStr = ""; if (end == -1) { charStr = dataStr.substring(start + 2, dataStr.length()); } else { charStr = dataStr.substring(start + 2, end); } char letter = (char) Integer.parseInt(charStr, 16); // 16進制parse整形字符串。 buffer.append(new Character(letter).toString()); start = end; } return buffer.toString(); } }

總結

以上是生活随笔為你收集整理的hadoop中汉字与英文字符混合的keyword做为combine的key的问题的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。