离线在CentOS上安装CDH
前兩天裝了一個5節點的CDH5.7.0測試環境,因為管理員不給開互聯網連接,所以只能離線本地安裝。記錄了一下大概的安裝步驟。因為過了兩天,按照回憶寫的,部分步驟可能不全。
1、 準備工作
操作系統:CentOS6.4,設置本地YUM源。
5個節點
XXX.XXX.XXX.11 cdh1(namenode)
XXX.XXX.XXX.12 cdh2
XXX.XXX.XXX.13 cdh3
XXX.XXX.XXX.14 cdh4
XXX.XXX.XXX.15 cdh5
關閉所有節點防火墻
sudo service iptables stopsudo chkconfig iptables offsudo vi /etc/selinux/config SELINUX=disabled在 namenode節點安裝http服務并啟動
yum install httpdservice httpd startchkconfig httpd on配置所有節點hosts文件
vi /etc/hosts內容如下
127.0.0.1 localhost localhost localhost4 localhost44
::1 localhost localhost localhost6 localhost66
XXX.XXX.XXX.11 cdh1
XXX.XXX.XXX.12 cdh2
XXX.XXX.XXX.13 cdh3
XXX.XXX.XXX.14 cdh4
XXX.XXX.XXX.15 cdh5
XXX.XXX.XXX.11 archive.cloudera.com
所有節點安裝ssh
yum install openssh-clients
2、下載cdh5.7.0和cm5.7.0
下載CM5.7.0.:
http://archive.cloudera.com/cm5/cm/5/ cloudera-manager-xenial-cm5.7.0_amd64.tar.gz
下載CDH5.7.0:
http://archive-primary.cloudera.com/cdh5/repo-as-tarball/5.7.0/cdh5.7.0-ubuntu16-04.tar.gz
下載Key
http://archive.cloudera.com/navigator-keytrustee5/redhat/6/x86_64/navigator-keytrustee/5/
將下載的文件解壓至相應目錄如下
mkdir -p /var/www/html/cm5/redhat/6/x86_64/
mkdir -p /var/www/html/cdh5/redhat/6/x86_64/
mkdir -p /var/www/html/navigator-keytrustee5/redhat/6/x86_64/
訪問http://cdh1/cm5/redhat/6/x86_64/cm/5/RPMS/x86_64/驗證是否可以訪問,也可以使用archive.cloudera.com的域名驗證一下
3、配置yum文件
cd /etc/yum.repos.d/
下載數據源的repo文件:
http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/cloudera-cdh5.repo
http://archive-primary.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo
http://archive-primary.cloudera.com/navigator-keytrustee5/redhat/6/x86_64/navigator-keytrustee/navigator-keytrustee5.repo
下載下來的文件,baseurl的值都是使用archive.cloudera.com的域名,我們已經在hosts文件中重定向到了namenode節點
4、安裝cm5.7.0
下載cloudera-manager-installer.bin:
http://archive-primary.cloudera.com/cm5/installer/5.7.0/cloudera-manager-installer.bin
給下載下來的文件執行權限
chmod +x cloudera-manager-installer.bin
等待一小會就安裝完成了,即可訪問http://namenode:7180訪問進行cdh的安裝。注意:在此種安裝方法中不需要建立服務器間的互信,也不需要安裝JDK
5、一鍵安裝cdh
登錄頁面,使用 admin/admin登錄,根絕界面提示一步步安裝即可。
在安裝的時候如果提示HTTPS訪問不了,就在NameNode上配置HTTPS服務,如果繼續提示這個HTTPS不安全什么的,就把對HTTPS安全的驗證先關了。
總結
以上是生活随笔為你收集整理的离线在CentOS上安装CDH的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 摩卡业务服务管理 全面彰显强大产业推动优
- 下一篇: [转载] 管Q某犇借的手写堆