Hadoop 2.0(YARN/HDFS)学习资料汇总
1. PDF資料
(1)“Apache Hadoop YARN:Moving beyondMapReduce and Batch Processing”?,YARN ?leader?Arun Murthy寫的一本關于YARN的書籍,目前只有前兩章試讀(還在編寫中,預定明年12月份出版),下載地址。
(2)“Hadoop 0.23 MRv2分析”,由百度工程師編寫,他的新浪微博:@大數據的wm,郵箱:?infcollector@gmail.com,這個文檔介紹是國內非常早的介紹YARN的資料,我也是從這份資料開始學習的。
(3)“Architecture of Next Generation Apache Hadoop MapReduceFramework”,這份資料來自Hadoop jira,系統全面的介紹了MRv2/YARN的來源、架構和一些內部實現細節。
(4)“Hadoop Security Analysis”, Hadoop 2.0安全機制介紹文檔,來自:?https://issues.apache.org/jira/browse/HADOOP-9621
這些資料都給出了微盤下載鏈接,也歡迎大家關注我的新浪微博:西成懂。
2. Hadoop 2.0書籍
《Hadoop技術內幕:深入解析YARN架構設計與實現原理》,該書從基本原理到內部實現,全方位介紹了Hadoop 2.0中資源管理系統YARN。具體介紹可登陸官方宣傳網站:http://hadoop123.com/。
3. 技術博客
(1)Hortonworks中關于YARN的幾篇深入分析文章:
Introducing Apache Hadoop YARN
Apache Hadoop YARN – Background and an Overview
Apache Hadoop YARN – Concepts and Applications
Apache Hadoop YARN – ResourceManager
Apache Hadoop YARN – NodeManager
(2)HDFS2剖析方面相當不錯的博客:
http://www.sizeofvoid.net/
(3)我的博客,呵呵,主要專注于YARN以及YARN上的計算框架:
http://dongxicheng.org/recommend/
4. Hadoop jira
Hadoop jira是最好的學習資料,里面有大量的PDF文檔、栩栩如生的對話和探討,建議每天都讀Hadoop jira,養成習慣,并參與討論。
HDFS jira:https://issues.apache.org/jira/browse/HDFS
MapReduce jira:?https://issues.apache.org/jira/browse/MAPREDUCE
YARN jira:https://issues.apache.org/jira/browse/YARN
原創文章,轉載請注明:?轉載自董的博客
本文鏈接地址:?http://dongxicheng.org/mapreduce-nextgen/hadoop-yarn-hdfs-material/
總結
以上是生活随笔為你收集整理的Hadoop 2.0(YARN/HDFS)学习资料汇总的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 深入理解Hadoop YARN中的Con
- 下一篇: 编写高效的C程序与C代码优化