linux下搭建hadoop环境步骤分享
linux下搭建hadoop環境步驟,需要的朋友可以參考下
1、下載hadoop包
wget http://apache.freelamp.com/hadoop/core/stable/hadoop-0.20.2.tar.gz
2、tar xvzf hadoop-0.20.2.tar.gz
3、安裝JDK,從oracle網站上直接下載JDK,地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html
4、chmod +x jdk-6u21-linux-i586.bin;./jdk-6u21-linux-i586.bin,當前目錄下出現了jdk1.6.0_21目錄
5、配置java環境變量 vi /etc/profile
復制代碼 代碼如下:
export JAVA_HOME=/root/src/hadoop/jdk1.6.0_21
export CLASSPATH=CLASSPATH:CLASSPATH:CLASSPATH:JAVA_HOME/lib:JAVAHOME/jre/libexportPATH=JAVA_HOME/jre/lib export PATH=JAVAH?OME/jre/libexportPATH=PATH:$JAVA_HOME/bin
在終端下執行 source /etc/profile 使配置生效
6、可以用以下命令查看
顯示JAVA版本 java -vesion
復制代碼 代碼如下:
echo $JAVA_HOME
which java
echo $PATH
echo $CLASSPATH
如果java -version沒有顯示你的JDK的版本,請檢查你的path的設置。
7、配置hadoop環境變量 vi /etc/profile
復制代碼 代碼如下:
export HADOOP_INSTALL=/root/src/hadoop/hadoop-0.20.2
export PATH=PATH:PATH:PATH:HADOOP_INSTALL/bin
source /etc/profile 使配置生效周易起名
8、測試環境
hadoop version 顯示
Hadoop 0.20.2
Subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.20 -r 911707
Compiled by chrisdo on Fri Feb 19 08:07:34 UTC 2010
9、配置
hadoop每一個組件都使用一個XML文件配置,核心屬性在core-site.xml中,HDFS屬性在hdfs-site.xml中,MapReduce屬性在mapred-site.xml中。這些文件都在conf子目錄下。
hadoop有本地模式、偽分布模式和完全分布模式三種,默認配置為本地模式,沒有守護進程,一切都運行在單個JVM上。
總結
以上是生活随笔為你收集整理的linux下搭建hadoop环境步骤分享的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: linux平台的office文档转pdf
- 下一篇: linux 触摸屏驱动编写