|
1.2 获取Hadoop源代码
# i, O2 c2 c5 d& p' A1 l) a7 t" j当前比较流行的Hadoop源代码版本有两个: Apache Hadoop和Cloudera Distributed Hadoop( 简称CDH) 。 Apache Hadoop是由2 H, D+ d. l9 ^; S% B! v
雅虎、 Cloudera、 Facebook等公司组成的Hadoop社区共同研发的, 它属于最原始的开源版本, 在该版本基础上, 很多公司进行了$ _8 g- G' J$ r1 K
封装和优化, 推出了自己的开源版本, 其中, 最有名的一个是Cloudera公司发布的CDH版本。+ Z7 r# t+ s! ?8 H' a- ?
考虑到Apache Hadoop是最原始的版本, 且使用最为广泛, 因而本书选用了Apache Hadoop版本作为分析对象。 自从Apache: r; z) v& @) ]2 u; k% u# ]
Hadoop发布以来, 已经陆续推出很多版本( 具体见2.2节) , 读者可自行在Hadoop SVN 地址
4 y! I( B- r5 o# C8 Qhttp://svn.apache.org/repos/asf/hadoop/common/branches/查看或者下载所有版本, 也可以从Apache官方主页
' K+ |7 H0 a Q }3 [http://hadoop.apache.org/releases.html上下载最新版本。
7 K& G, x1 d' T9 U [# }- g本书介绍的YARN属于Hadoop 2.0的一个分支( 另外两个分支分别是HDFS和MapReduce) , Hadoop 2.0的命名方式一般为) q# P8 s- E% z5 l
hadoop-2.x.x。 Apache官方主页提供了两个压缩包, 一个是Hadoop源代码( hadoop-{VERSION}-src.tar.gz) , 一个是可直接用于部. ]9 V. R' U' g2 ~, c, V" e
署的JAR包( hadoop-{VERSION}.tar.gz) , Cloudera发布的CDH版本则将源代码和JAR包存放在一起组成一个压缩包 ( hadoop-4 M' {# z/ Q/ V
2.0.0-cdh4.x.x.tar.gz) [2] 。7 v; n% \4 a x3 W* M6 ~
本书介绍的YARN设计思想适用于所有Apache Hadoop 2.x版本, 但涉及具体的实现( 指源代码级别的实现) 时, 则以Apache: {. f0 b( [ u6 l# C# X! F7 w
Hadoop 2.2.0及更高稳定版本为主, 因此, 如果你想对比Hadoop源代码阅读本书, 推荐下载Apache 2.2.0或更高版本。
% `' [; T! D6 n+ J' K4 U[2] CDH4下载地址: http://archive.cloudera.com/cdh4/cdh/4/。 " x; N$ k( m! T9 W3 }
% [ a9 ?) ?& C. ]# @! ~& }: A8 R1 U5 ~* h% _) A1 u, [ V. H7 W
|
|