elasticsearch6.X 及head插件部署(完整版)
elasticsearch6.X 及head插件部署(完整版)
2018年04月28日 17:22:16?zou79189747?閱讀數:3178
?版權聲明: https://blog.csdn.net/zou79189747/article/details/80111219
本文介紹了elasticsearch集群及head插件部署流程,包括后臺啟動腳本、開機自啟動,面向生產環境的部署方式供大家參考。
因工作環境問題,幾乎所有內容都是手打的,自己邊部署邊記錄問題及步驟,百分百保證能成功部署,若某一步有問題的話,有可能是打錯了,歡迎留言指正
?
集群環境
| 虛擬機(centos6.5) | 是否可以成為主節點 | 是否為數據節點 |
| 100.0.26.217 | true | true |
| 100.0.26.218???? | true | true |
| 100.0.26.219 | true | true |
?軟件版本
jdk1.8.0_144.tar.gz
elasticsearch-6.2.4.tar.gz
node-v8.11.1-linux-x64.tar.xz
elasticsearch-head-master.zip(https://github.com/mobz/elasticsearch-head)
1、安裝JDK
tar -zxvf jdk1.8.0_144.tar.gz
配置環境變量
vi /etc/profile? ?
在文件末尾添加如下配置:
export JAVA_HOME=/home/soft/jdk1.8.0_144
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin
source /etc/profile
使用java、javac確定環境變量配置正確
2、安裝ElasticSearch(單節點)
tar -zxvf elasticsearch-6.2.4.tar.gz
vi elasticsearch-6.2.4/config/elasticsearch.yml
將配置設置為如下:
cluster.name: es6.2
node.name: node-1
node.master: true
node.data: true
network.host: 0.0.0.0
因為elasticsearch不能使用root用戶運行,創建一個es用戶
adduser es
chown -R es:es elasticsearch-6.2.4
su es
cd elasticsearch-6.2.4
./bin/elasticsearch
此時報錯信息如下:
[2018-02-14T23:40:16,908][ERROR][o.e.b.Bootstrap ] [node-1] node validation exception [4] bootstrap checks failed [1]: max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536] [2]: max number of threads [1024] for user [elsearch] likely too low, increase to at least [4096] [3]: max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144] [4]: system call filters failed to install; check the logs and fix your configuration or disable system call filters at your own risk[1]、[2] 解決辦法:
vi /etc/security/limits.d/90-nproc.conf修改配置如下:
?
* soft nproc 4096
root soft nproc unlimited
es soft nofile 65536
es hard nofile 65536
[3]解決辦法:
?
vi /etc/sysctl.conf添加如下配置:
?
vm.max_map_count = 262144使配置生效
sysctl -p[4]解決辦法:
Centos 6.5不支持SecComp,而ES6.2.4默認bootstrap.system_call_filter為true,?在elasticsearch.yml增加如下配置:
bootstrap.memory_lock: false
bootstrap.system_call_filter: false
啟動ES
./bin/elasticsearch使用http://100.0.26.117:9200查看節點信息,若正常訪問則表明服務啟動成功
3、搭建集群
在elasticsearch.yml增加配置:
discovery.zen.ping.unicast.hosts: ["100.0.26.117", "100.0.26.118", "100.0.26.119"]
discovery.zen.minimum_master_nodes: 2
最終第一個節點的配置如下:
cluster.name: es6.2
node.name: node-1
node.master: true
node.data: true
network.host: 0.0.0.0
bootstrap.memory_lock: false
bootstrap.system_call_filter: false
discovery.zen.ping.unicast.hosts: ["100.0.26.117", "100.0.26.118", "100.0.26.119"]
discovery.zen.minimum_master_nodes: 2
其他節點配置cluster.name必須一致且node.name不能一樣,其他可以根據需求做改動
按照相同的步驟啟動各個節點,控制臺顯示啟動成功之后,訪問http://100.0.26.117:9200/_cat/nodes,若配置的節點都在,則集群部署成功,有問題則具體問題具體解決。
這是我們搭的測試環境,在生產環境肯定需要后臺啟動elasticsearch,使用如下命令
./bin/elasticsearch -d顯然這種方式在機器重啟之后服務就沒了,因此我們需要配置機器重啟后elasticsearch服務自啟動,切換root用戶,在/etc/init.d/目錄下創建一個es_run文件配置如下:
su root vi /etc/init.d/es_run#!/bin/sh
#chkconfig: 2345 80 05
#description: es
export JAVA_HOME=/home/soft/jdk1.8.0_144
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin
case "$1" in
start)
es_pid=`ps aux|grep elasticsearch | grep -v 'grep elasticsearch' | awk '{print $2}'`
if [ "$es_pid" == "" ]; then
echo "elasticsearch stoped, prepare to start..."
su es<<!
/home/soft/elasticsearch-6.2.4/bin/elasticsearch -d
!
while true
do
es_pid=`ps aux|grep elasticsearch | grep -v 'grep elasticsearch' | awk '{print $2}'`
if [ "$es_pid" == "" ]; then
sleep 1;
echo "elasticsearch starting..."
else
echo "elasticsearch started,pid is $es_pid"
break
fi
done
else
echo "elasticsearch exist,pid is $es_pid"
fi
;;
stop)
es_pid=`ps aux|grep elasticsearch | grep -v 'grep elasticsearch' | awk '{print $2}'`
if [ "$es_pid" == "" ]; then
echo "elasticsearch not started"
else
kill -9 $es_pid
echo "elasticsearch stoped"
fi
;;
restart)
es_pid=`ps aux|grep elasticsearch | grep -v 'grep elasticsearch' | awk '{print $2}'`
if [ "$es_pid" == "" ]; then
echo "elasticsearch stoped, prepare to start..."
su es<<!
/home/soft/elasticsearch-6.2.4/bin/elasticsearch -d
!
while true
do
es_pid=`ps aux|grep elasticsearch | grep -v 'grep elasticsearch' | awk '{print $2}'`
if [ "$es_pid" == "" ]; then
sleep 1;
echo "elasticsearch starting..."
else
echo "elasticsearch started,pid is $es_pid"
break
fi
done
else
kill -9 $es_pid
echo "elasticsearch stoped"
su es<<!
/home/soft/elasticsearch-6.2.4/bin/elasticsearch -d
!
while true
do
es_pid=`ps aux|grep elasticsearch | grep -v 'grep elasticsearch' | awk '{print $2}'`
if [ "$es_pid" == "" ]; then
sleep 1;
echo "elasticsearch starting..."
else
echo "elasticsearch started,pid is $es_pid"
break
fi
done
fi
;;
*)
echo "start|stop|restart"
;;
esac
exit $?
注意腳步文件的前兩行不可缺少
給腳步賦予可執行權限,并添加到開機啟動項中。此時服務并沒有啟動,重啟機器才會啟動。當前需手動啟動一次服務。
chmod +x /etc/init.d/es_run
chkconfig --add /etc/init.d/es_run
service es_run start
每個節點按照同樣的方式操作,完成機器重啟后elasticsearch服務自啟動
4、安裝head插件
解壓node-v8.11.1-linux-x64.tar.xz 之前確保系統已安裝xz,若無則先安裝
yum install xz
tar xvf node-v8.11.1-linux-x64.tar.xz
配置node環境變量
?
vi /etc/profileexport JAVA_HOME=/home/soft/jdk1.8.0_144
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export NODE_PATH=/home/soft/node-v8.11.1-linux-x64
export PATH=$PATH:$JAVA_HOME/bin:$NODE_PATH/bin
可以在控制臺輸入node或npm在驗證node是否配置正確
配置node鏡像源
npm set registry http://ip:port下載head插件需要的依賴
cd /home/soft/elasticsearch-head-master
npm install
由于每個人的鏡像源不一致可能會導致依賴不能完完整整下下來,這時可以考慮提示下載不下來的依賴,單獨下載。像我使用的內網鏡像源,碰到了三個問題:
1、bluebird依賴下載失敗,
npm info bluebird查看鏡像源中所有bluebird所有版本信息,最新版本為3.5.1,npm install 默認下載的是鏡像源中的最新版本
手動測試:
npm install bluebird@3.5.1發現3.5.1版本下載不下來,而換成3.5.0 就ok了,具體原因沒有去深究,有了解的朋友歡迎分享。下載好后繼續全量下載
npm install bluebird@3.5.0?
npm install2、core-js也碰到同樣的問題,最終下載的2.5.0。下載好后繼續全量下載
?
npm install core-js@2.5.0 npm install3、phantomjs-prebuilt下載失敗,錯誤信息如下:
npm ERR! phantomjs-prebuilt@2.1.14 install: `node install.js`
npm ERR! Exit status 1
npm ERR!
npm ERR! Failed at the phantomjs-prebuilt@2.1.14 install script 'node install.js'.
網上找到解決辦法,原文地址:https://stackoverflow.com/questions/40992231/failed-at-the-phantomjs-prebuilt2-1-13-install-script-node-install-js
npm install phantomjs-prebuilt@2.1.14 --ignore-scripts繼續下載其他依賴:
?
npm install直至沒有錯誤信息,表明所有依賴已下載完成
上述3個問題前兩個應該跟我的環境有關,但第三個應該大家都會碰到
修改Gruntfile.js配置,在keepalive: true下增加hostname:'*'
vi Gruntfile.jsconnect: {
server: {
options: {
port: 9100,
base: '.',
keepalive: true,
hostname: '*'
}
}
}
修改保存后啟動head 服務
npm run start網上有些說使用grunt 啟動,這種方式你得先全局安裝一下grunt-cli,個人覺得多此一舉,方式如下:
npm -g install grunt-cli
grunt server
瀏覽器打開http://100.0.26.117:9100,此時發現頁面能正常打開,但是提示集群健康值:未連接,這個問題由兩個地方的配置導致的,網上查資料基本只說一種情況,可能他們只基于本地測試,不是面向生產環境,所有有些問題并未發現。
1、修改elasticsearch.yml,增加如下配置并重啟ES:
http.cors.enabled: true
http.cors.allow-origin: "*"
2、再次打開http://100.0.26.117:9100,顯示還是未連接,如下圖:
注意圖片上用紅框標注的,生產環境中客戶端訪問的時候, 連接localhost肯定是訪問不了的,這時把localhost改成100.0.26.117就可以了,也可以修改app.js的一個配置:
vi /home/soft/elasticsearch-head-master/_site/app.js this.base_uri = this.config.base_uri || this.prefs.get("app-base_uri") || "http://100.0.26.117:9200";重啟head 服務就OK了。
很容易想到接下來就是后臺啟動以及開機自啟動,配置過程跟elasticsearch相似
vi /etc/init.d/es_head_run配置如下:
?
#!/bin/sh
#chkconfig: 2345 80 05
#description: es_head_run
export NODE_PATH=/home/soft/node-v8.11.1-linux-x64
export PATH=$PATH:$NODE_PATH/bin
cd /home/soft/elasticsearch-head-master
nohup npm run start >/home/soft/elasticsearch-head-master/nohup.out 2>&1 &
賦權限及添加到開機啟動項
?
chmod +x /etc/init.d/es_head_run
chkconfig -add /etc/init.d/es_head_run
service es_head_run
到這里整個部署流程已經完成
總結
以上是生活随笔為你收集整理的elasticsearch6.X 及head插件部署(完整版)的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 转载:谈我所经历的区块链历程
- 下一篇: elasticsearch6.2.2安装