|
1.2 获取Hadoop源代码# W0 B& o! S5 {' p5 w. j: Q+ t( y
当前比较流行的Hadoop源代码版本有两个: Apache Hadoop和Cloudera Distributed Hadoop( 简称CDH) 。 Apache Hadoop是由: A) E( }8 J8 k6 i) q$ r9 `
雅虎、 Cloudera、 Facebook等公司组成的Hadoop社区共同研发的, 它属于最原始的开源版本, 在该版本基础上, 很多公司进行了
G1 r5 J, u* f封装和优化, 推出了自己的开源版本, 其中, 最有名的一个是Cloudera公司发布的CDH版本。
`1 Q; G' p0 N1 I( R考虑到Apache Hadoop是最原始的版本, 且使用最为广泛, 因而本书选用了Apache Hadoop版本作为分析对象。 自从Apache; r, \; @1 o+ U; j7 \
Hadoop发布以来, 已经陆续推出很多版本( 具体见2.2节) , 读者可自行在Hadoop SVN 地址8 O1 p8 x3 y6 ]6 d
http://svn.apache.org/repos/asf/hadoop/common/branches/查看或者下载所有版本, 也可以从Apache官方主页
! G: ]6 {0 J4 Q: t) g& [http://hadoop.apache.org/releases.html上下载最新版本。
9 A$ C8 j" A3 u- K6 g* v本书介绍的YARN属于Hadoop 2.0的一个分支( 另外两个分支分别是HDFS和MapReduce) , Hadoop 2.0的命名方式一般为- n( ~( \) [% }& \) ^
hadoop-2.x.x。 Apache官方主页提供了两个压缩包, 一个是Hadoop源代码( hadoop-{VERSION}-src.tar.gz) , 一个是可直接用于部0 M2 ~5 l+ r! L6 K( [
署的JAR包( hadoop-{VERSION}.tar.gz) , Cloudera发布的CDH版本则将源代码和JAR包存放在一起组成一个压缩包 ( hadoop-
. v1 X2 n0 C7 d& j2.0.0-cdh4.x.x.tar.gz) [2] 。
: r- O# |( a% C5 v& e' q8 k0 j# e本书介绍的YARN设计思想适用于所有Apache Hadoop 2.x版本, 但涉及具体的实现( 指源代码级别的实现) 时, 则以Apache0 D7 Z7 [9 h! a$ Q7 L& n
Hadoop 2.2.0及更高稳定版本为主, 因此, 如果你想对比Hadoop源代码阅读本书, 推荐下载Apache 2.2.0或更高版本。
: B- ?1 B6 p/ O1 g' } ^9 o5 K[2] CDH4下载地址: http://archive.cloudera.com/cdh4/cdh/4/。 ! S; \# l0 _( p8 A6 t
0 b R# D4 e# t) t0 X& G1 ^" d( d* U7 I: ?
|
|