MongoDB分片机制
為什么需要分片
應用層實現的手動分片:
MongoDB分片組件
mongos路由器負責將應用程序的請求指引到合適的分片上。注意到mongos路由器是在應用程序端實現的,因此分片的配置信息需要保存在另外的服務器上,即配置服務器。mongos通過兩階段提交同步更新最新的分片信息。
核心分片操作
Mongo的分片是基于集合的分片,即一個集合中的文檔可以分布在不同的機器上。在對集合進行分片時,必須聲明一個或多個字段作為分片鍵,如果選擇_id,那么文檔會基于對象ID的范圍進行分布,由于Mongo的_id字段與時間戳相關,導致該字段是遞增的,這樣會使得分片不夠隨機,所以我們可以聯合其他字段,比如usernama,與_id組成復合分片鍵。在講具體的分片操作之前,我們需要明晰一個概念:
塊
塊是一個分片中一段連續的分片鍵的范圍。注意,塊是一個邏輯概念,塊內的分片鍵是連續的,但物理上,塊并不是連續的文檔。
比如,如果一個從harris到norris的塊存在于分片A上,這代表可以在分片A上找到這個范圍的鍵,而并不代表從harris到norris的文檔在分片A上是連續存儲的。
拆分與遷移操作
在初始化分片集群時,只有一個塊,這個塊的范圍覆蓋了整個分片集群,隨著數據的插入,我們不斷更新這個塊的范圍的最大值和最小值。當塊大小達到閾值(默認塊的最大大小為64MB和100000個文檔,先達到哪個就按哪個作為閾值),就會對塊進行拆分,拆分很簡單,就是對原來的范圍一分為二,分為兩個塊,拆分過程不涉及任何的物理移動,僅僅是邏輯上對塊的元數據進行更新。
當這個分片中的塊越來越多時,就會由一個名為均衡器的軟件進程,將塊在不同分片上進行物理遷移。通常來說,當集群中擁有塊最多的分片與擁有塊最少的分片的塊數差大于8時,均衡器就會進行一次均衡處理,塊從塊較多的分片遷移到塊少的分片,直到兩個分片的塊數大致相等為止。
總結
以上是生活随笔為你收集整理的MongoDB分片机制的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 阿里巴巴Android开发手册
- 下一篇: 基于Arduinoros的温度控制器