HBase 2.0版本正式发布
1.HBase 2.0版本正式發布
關于HBase版本定義
HBase從1.0.0版本開始,在版本定義上正式遵循了Semantic Versioning規范:
一個版本號,由三部分組成:?MAJOR.MINOR.PATCH,關于這三部分數字的變更,定義如下:
-
MAJOR版本號變更:意味著可能帶來不兼容的API變更。
-
MINOR版本號變更:主要是增加了一些功能特性,但API接口卻是向前兼容的。
-
PATCH版本號變更:主要是針對Bug修復。
按照該定義,我們舉例說明如下:
-
從1.0.0到2.0.0版本,可能帶來一些不兼容的API變更。
-
從1.0.0到1.1.0版本,意味著合入了一些新的Feature,但API接口卻是兼容的。
-
從1.0.0版本到1.0.1版本,只是在1.0.0版本基礎之上,做了一些Bug修復,但沒有合入新的Feature。
關于2.0版本所包含的一些關鍵特性,在以前的很多文章中都已經揭示過,這里再簡單闡述一下:
New region assignment manager
基于Procedure V2的AssignmentManager V2,旨在能夠更快速的分配Region,狀態機的存儲不再依賴于ZooKeeper,能夠更好的應對Region長時間RIT問題。
In-memory flush and compaction
MemStore中的數據達到一定大小以后,不是直接Flush成HDFS中的HFile文件,而是先Flush到內存中的一個不可改寫的Segment,這樣,內存中的多個Segments可以預先合并,當達到一定的大小以后,才Flush成HDFS中的HFile文件,這樣做的好處是希望有效降低Compaction所帶來的寫IO放大問題。
在《一條數據的HBase之旅,簡明HBase入門教程-Flush與Compaction》一文中,詳細介紹了該特性。
Off-heap read and write
減少對Heap內存的使用,改用Offheap區的內存,有效減少GC壓力。
Async RPC Client
利用異步RPC機制,提升客戶請求并發度,提升Client端線程資源利用率。
RegionServer Group
將RegionServer劃分成多個邏輯Group,提供多租戶能力
MOB
讓HBase更好的支持數KB甚至數MB級別的小對象存儲,這些小對象采用獨立的HFile文件進行存儲,而且不參與普通的Compaction,這樣不會因為小對象數據使得Compaction的寫IO放大問題進一步惡化。
與1.x版本的兼容性
1.x版本的Client可以訪問2.0版本的集群,進行正常的數據讀寫操作。但從1.x版本不停服務的情況下滾動升級到2.0版本是沒法做到的,1.x版本的coprocessor/Endpoint不做改動的情況下也無法在2.0版本中正常使用。
對比HBaseCon Asia 2017大會上Stack的演講內容,似乎有了一些出入,這說明2.0版本為了發布還是不得不做了一些割舍。
http://www.nosqlnotes.com/techtrends/hbase-2-0-release/
總結
以上是生活随笔為你收集整理的HBase 2.0版本正式发布的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: windows远程连接ubuntu 黑屏
- 下一篇: Stata15重编码