生活随笔
收集整理的這篇文章主要介紹了
Hadoop部署
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
Hadoop三種部署模式以及兩個重要配置文件
Hadoop三種部署模式
部署模式簡介特點
| 本地模式 | 在單臺服務器上進行開發和調試。 | 1. 無運行守護進程（daemon），不使用分布式文件系統（HDFS），而是使用本地計算機的文件系統
2. 所有程序都在本機JVM上執行，不啟動NameNode、DataNode、JobTracker和TaskTracker等服務進程，同一進程提供了所有的服務。 |
| 偽分布式 | 在一臺主機上模擬多臺主機 | 啟動進程：DataNode、NameNode、Secondary NameNode |
| 完全分布式 | | 實際生產環境使用 |
部署Hadoop集群時需要配置的兩個重要文件及其中重要的屬性
core-site.xml和hdfs-site.xml文件，重要的屬性包括name、value屬性
core-site.xmlhadoop.tmp.dir臨時目錄位置
| fs.defaultFS | 設置默認HDFS端口 |
<configuration><property><name>hadoop.tmp.dir
</name><value>/usr/local/java/hadoop/hadoop-2.7.1/tmp
</value><description>Abaseforothertemporarydirectories.
</description></property><property><name>fs.defaultFS
</name><value>hdfs://localhost:9000
</value></property>
</configuration>
hdfs-site.xmldfs.replication同一數據塊的副本數
| dfs.namenode.name.dir | NameNode保存元數據的位置 |
| dfs.datanode.data.dir | DataNode保存位置 |
<configuration><property><name>dfs.replication
</name><value>1
</value></property><property><name>dfs.namenode.name.dir
</name><value>/usr/local/java/hadoop/hadoop-2.7.1/tmp/dfs/name
</value></property><property><name>dfs.datanode.data.dir
</name><value>/usr/local/java/hadoop/hadoop-2.7.1/tmp/dfs/data
</value></property>
</configuration>
總結
以上是生活随笔為你收集整理的Hadoop部署的全部內容，希望文章能夠幫你解決所遇到的問題。
如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。
