|
|
1.2 获取Hadoop源代码
# S7 k2 I2 z7 F9 P/ G当前比较流行的Hadoop源代码版本有两个： Apache Hadoop和Cloudera Distributed Hadoop（ 简称CDH） 。 Apache Hadoop是由, G6 T! i7 j7 G/ } f
雅虎、 Cloudera、 Facebook等公司组成的Hadoop社区共同研发的， 它属于最原始的开源版本， 在该版本基础上， 很多公司进行了
. q9 \$ u$ [3 h$ T+ P! M# Y封装和优化， 推出了自己的开源版本， 其中， 最有名的一个是Cloudera公司发布的CDH版本。' A0 {( G, F! Z- t: V& Y7 y
考虑到Apache Hadoop是最原始的版本， 且使用最为广泛， 因而本书选用了Apache Hadoop版本作为分析对象。 自从Apache6 a6 ~0 N z8 `& K& f3 d, t
Hadoop发布以来， 已经陆续推出很多版本（ 具体见2.2节） ， 读者可自行在Hadoop SVN 地址6 {7 Y( n% q7 o' q F( B
http://svn.apache.org/repos/asf/hadoop/common/branches/查看或者下载所有版本， 也可以从Apache官方主页% Z; a: s# U/ f3 r4 z
http://hadoop.apache.org/releases.html上下载最新版本。
8 J3 k, D9 w* u* q) [6 i本书介绍的YARN属于Hadoop 2.0的一个分支（ 另外两个分支分别是HDFS和MapReduce） ， Hadoop 2.0的命名方式一般为
3 i+ }2 q6 }# F5 [: M, Jhadoop-2.x.x。 Apache官方主页提供了两个压缩包， 一个是Hadoop源代码（ hadoop-{VERSION}-src.tar.gz） ， 一个是可直接用于部
+ K/ d: q! k1 l. P' \" E% v署的JAR包（ hadoop-{VERSION}.tar.gz） ， Cloudera发布的CDH版本则将源代码和JAR包存放在一起组成一个压缩包 （ hadoop-
* a& z8 T, c5 ~2.0.0-cdh4.x.x.tar.gz） [2] 。
* |9 l2 w) B& }; r本书介绍的YARN设计思想适用于所有Apache Hadoop 2.x版本， 但涉及具体的实现（ 指源代码级别的实现） 时， 则以Apache
! E% m1 M- L- t' o0 m* fHadoop 2.2.0及更高稳定版本为主， 因此， 如果你想对比Hadoop源代码阅读本书， 推荐下载Apache 2.2.0或更高版本。
3 R. Z$ a& @+ j[2] CDH4下载地址： http://archive.cloudera.com/cdh4/cdh/4/。
" \7 Z6 R; v0 h; P1 @4 v2 R) M! v8 p9 o
/ r: n6 b% T* w, V9 J; _7 i% T |
|
发表于 2017-4-12 20:35:42
