|
1.2 获取Hadoop源代码 X7 U1 @/ o1 m9 |3 d+ T
当前比较流行的Hadoop源代码版本有两个: Apache Hadoop和Cloudera Distributed Hadoop( 简称CDH) 。 Apache Hadoop是由5 |5 d+ w3 j+ J- V
雅虎、 Cloudera、 Facebook等公司组成的Hadoop社区共同研发的, 它属于最原始的开源版本, 在该版本基础上, 很多公司进行了
! K9 ~8 D! |, w- U6 i4 Y( Z封装和优化, 推出了自己的开源版本, 其中, 最有名的一个是Cloudera公司发布的CDH版本。- F" n9 _" H4 o: T& L
考虑到Apache Hadoop是最原始的版本, 且使用最为广泛, 因而本书选用了Apache Hadoop版本作为分析对象。 自从Apache
& W: D- p; I: e* i4 DHadoop发布以来, 已经陆续推出很多版本( 具体见2.2节) , 读者可自行在Hadoop SVN 地址
5 g, ~7 a4 r: E- |, bhttp://svn.apache.org/repos/asf/hadoop/common/branches/查看或者下载所有版本, 也可以从Apache官方主页
% K0 w, D4 u: }' D( j5 Bhttp://hadoop.apache.org/releases.html上下载最新版本。
# n2 H5 T. G! o- o* j本书介绍的YARN属于Hadoop 2.0的一个分支( 另外两个分支分别是HDFS和MapReduce) , Hadoop 2.0的命名方式一般为
/ T. O/ U( [$ K0 s3 E/ Q# {, hhadoop-2.x.x。 Apache官方主页提供了两个压缩包, 一个是Hadoop源代码( hadoop-{VERSION}-src.tar.gz) , 一个是可直接用于部
! Y+ |5 k! R# w署的JAR包( hadoop-{VERSION}.tar.gz) , Cloudera发布的CDH版本则将源代码和JAR包存放在一起组成一个压缩包 ( hadoop-
) s! ?! p6 T6 `' A4 }$ Z& X& ~2.0.0-cdh4.x.x.tar.gz) [2] 。 I2 o0 e8 J( S4 _' m( e
本书介绍的YARN设计思想适用于所有Apache Hadoop 2.x版本, 但涉及具体的实现( 指源代码级别的实现) 时, 则以Apache
$ S( t$ d T, Z6 O6 CHadoop 2.2.0及更高稳定版本为主, 因此, 如果你想对比Hadoop源代码阅读本书, 推荐下载Apache 2.2.0或更高版本。2 k; z; t; N$ b6 i
[2] CDH4下载地址: http://archive.cloudera.com/cdh4/cdh/4/。
0 W! u2 S3 z. @8 _9 k0 x6 P; C. P3 |4 D3 _- P) w6 F7 @
& ?+ Z4 L' F4 f |
|