单机版 hadoop 云平台(伪分布式)搭建 统计单词
生活随笔
收集整理的這篇文章主要介紹了
单机版 hadoop 云平台(伪分布式)搭建 统计单词
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
1.首先需要配置java環境
CentOS安裝java jdk教程
2.上傳hadoop到/usr/local目錄 并解壓
cd /usr/local lslinux上傳下載文件教程
3.配置hadoop環境目錄
vim /etc/profile #java environment export JAVA_HOME=/usr/local/jdk1.8.0_151 export JRE_HOME=/usr/local/jdk1.8.0_151/jre #export PATH=$PATH:/usr/local/jdk1.8.0_151/bin export CLASSPATH=./:$JAVA_HOME/lib:$JRE_HOME/lib#hadoop environment export HADOOP_HOME=/usr/local/hadoop-2.8.4 export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:4.在hadoop配置文件 配置java jdk
vim /usr/local/hadoop-2.8.4/etc/hadoop/hadoop-env.sh source /usr/local/hadoop-2.8.4/etc/hadoop/hadoop-env.sh # The java implementation to use. export JRE_HOME=/usr/local/jdk1.8.0_1515.查看
which hadoop hadoop version6.統計單詞
這里統計的是 /root/input/a.txt 文件,并且將結果存放到 /root/output 目錄
hadoop jar /usr/local/hadoop-2.8.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.8.4.jar wordcount /root/input/a.txt /root/output7.查看結果
cd /root/output
如需轉載請標明出處,有興趣可以加q群交流779133600
總結
以上是生活随笔為你收集整理的单机版 hadoop 云平台(伪分布式)搭建 统计单词的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 微信小程序 wx.request异步网络
- 下一篇: windows配置maven环境并换源