|
|
1.2 获取Hadoop源代码$ O$ h: K& l N
当前比较流行的Hadoop源代码版本有两个： Apache Hadoop和Cloudera Distributed Hadoop（ 简称CDH） 。 Apache Hadoop是由; Y2 E2 Q9 x% D2 Z7 L, |7 x2 X
雅虎、 Cloudera、 Facebook等公司组成的Hadoop社区共同研发的， 它属于最原始的开源版本， 在该版本基础上， 很多公司进行了; |; q. e" e$ _5 p4 O5 k
封装和优化， 推出了自己的开源版本， 其中， 最有名的一个是Cloudera公司发布的CDH版本。
8 g+ f& S' ?& k考虑到Apache Hadoop是最原始的版本， 且使用最为广泛， 因而本书选用了Apache Hadoop版本作为分析对象。 自从Apache* h+ a$ F) _ Y' X* `& G0 J
Hadoop发布以来， 已经陆续推出很多版本（ 具体见2.2节） ， 读者可自行在Hadoop SVN 地址
T" w, o) \! n* xhttp://svn.apache.org/repos/asf/hadoop/common/branches/查看或者下载所有版本， 也可以从Apache官方主页5 Z7 f ^( F, z" _9 T7 n6 M. y: n
http://hadoop.apache.org/releases.html上下载最新版本。! g$ V/ C. g, u& C( D0 D2 D1 y& F
本书介绍的YARN属于Hadoop 2.0的一个分支（ 另外两个分支分别是HDFS和MapReduce） ， Hadoop 2.0的命名方式一般为
/ a+ Q6 @0 m/ H8 @hadoop-2.x.x。 Apache官方主页提供了两个压缩包， 一个是Hadoop源代码（ hadoop-{VERSION}-src.tar.gz） ， 一个是可直接用于部 c2 L+ T) x$ D
署的JAR包（ hadoop-{VERSION}.tar.gz） ， Cloudera发布的CDH版本则将源代码和JAR包存放在一起组成一个压缩包 （ hadoop-
& b! g0 V5 K/ ^8 R) p4 s2.0.0-cdh4.x.x.tar.gz） [2] 。- |! W' l/ I' h% Z+ Z6 ]
本书介绍的YARN设计思想适用于所有Apache Hadoop 2.x版本， 但涉及具体的实现（ 指源代码级别的实现） 时， 则以Apache
3 O2 W, w" F/ s) H/ [! l* wHadoop 2.2.0及更高稳定版本为主， 因此， 如果你想对比Hadoop源代码阅读本书， 推荐下载Apache 2.2.0或更高版本。
; j! j7 O6 s' @[2] CDH4下载地址： http://archive.cloudera.com/cdh4/cdh/4/。 , p* y1 ^9 s" F+ c
: d: h% ~$ z& T% |3 q
' f5 q1 o1 f4 q* u |
|
发表于 2017-4-12 20:35:42
