es创建索引数量多了好还是少了好_Elasticsearch性能优化总结
Elasticsearch是目前大數據領域最熱門的技術棧之一,經過近8年的發展,已從0.0.X版升級至6.X版本,雖然增加了很多的特性和功能,但是在主體架構上,還是沒有太多的變化。下面就把我對于ES使用實踐的一些經驗總結一下,供大家參考;也請大家拍磚。
一、 硬件環境選擇:
如果有條件,盡可能使用SSD硬盤, 不錯的CPU。ES的厲害之處在于ES本身的分布式架構以及lucene的特性。IO的提升,會極大改進ES的速度和性能。
二、系統拓樸設計:
ES集群在架構拓樸時,一般都會采用Hot-Warm的架構模式,即設置3種不同類型的節點:Master節點、Hot 節點和 Warm節點。
Master節點設置:一般會設置3個專用的maste節點,以提供最好的彈性擴展能力。當然,必須注意discovery.zen.minimum_master_nodes 屬性的設置,以防split-brain問題,使用公式設置:N/2+1(N為候選master節點數)。 該節點保持: node.data: false ; 因為master節點不參與查詢、索引操作,僅負責對于集群管理,所以在CPU、內存、磁盤配置上,都可以比數據節點低很多。
Hot節點設置: 索引節點(寫節點),同時保持近期頻繁使用的索引。 屬于IO和CPU密集型操作,建議使用SSD的磁盤類型,保持良好的寫性能;節點的數量設置一般是大于等于3個。將節點設置為hot類型:
node.attr.box_type: hot
針對index, 通過設置index.routing.allocation.require.box
總結
以上是生活随笔為你收集整理的es创建索引数量多了好还是少了好_Elasticsearch性能优化总结的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: tableau三轴合并_《Tableau
- 下一篇: 可放口袋的键盘装键盘的袋子