|
2.7 本书涉及内容' u q, H# v1 B; R- x
本书的主要内容可用图2-13表示, 主要涉及两部分内容, 一个是YARN涉及的理念与实现, 该部分内容将在第二部分中介
7 o' h. i* L1 Q5 _绍。 另一个是运行于YARN之上的比较有名的开源框架, 包括MapReduce、 Tez、 Storm和Spark, 其中MapReduce、 Tez和Spark是以
) T. ], j* K& x( j. l; Y) N8 H短应用程序的形式直接运行在YARN之上; 而Storm则不同, 它是以服务的形式运行在YARN上, 用户编写的Topology( 即为Storm
F7 C6 y7 G) w7 `; j( m9 Z3 {应用程序, 类似于MapReduce作业, 将在第10章介绍) 则运行在Storm服务中, 该部分内容将在第三部分中介绍。2.8 小结0 `- O3 {/ s" \+ v1 J" T
本章介绍了YARN的设计理念和基本架构, 涉及到的内容较多, 包括YARN产生背景、 Hadoop术语解释和版本变迁、 YARN1 V4 W& Y6 S/ f+ l: d8 \
架构和通信协议等。 从编程模型角度看, YARN与传统并行编程模式非常像, 但兼具了分布式和并行两个特点; 从资源管理系统
* o) b" c' F& w+ c& \. k/ R角度看, YARN将扮演为上层计算框架提供计算资源的角色; 从云计算角度看, YARN可看做轻量级的PAAS层。6 d* c8 ]2 a- M% J4 v
在后面几章中, 我们将深入探讨YARN内部实现原理, 以便让读者进一步深层次理解YARN。 + V! ]/ K4 y& q0 U) D
! r' e$ X, r7 Q: ]
3 w% \' `+ Q+ c0 P! b8 |3 P |
|