|
2.7 本书涉及内容
v6 J1 Y' h0 _4 j7 J c: F' }7 I本书的主要内容可用图2-13表示, 主要涉及两部分内容, 一个是YARN涉及的理念与实现, 该部分内容将在第二部分中介
5 i7 m p8 V3 k! S/ N) h绍。 另一个是运行于YARN之上的比较有名的开源框架, 包括MapReduce、 Tez、 Storm和Spark, 其中MapReduce、 Tez和Spark是以3 V. o* J0 h( ~- f
短应用程序的形式直接运行在YARN之上; 而Storm则不同, 它是以服务的形式运行在YARN上, 用户编写的Topology( 即为Storm0 X/ l# c- a' t; `% }+ @; U+ q
应用程序, 类似于MapReduce作业, 将在第10章介绍) 则运行在Storm服务中, 该部分内容将在第三部分中介绍。2.8 小结1 R& Q" o, L4 q ]
本章介绍了YARN的设计理念和基本架构, 涉及到的内容较多, 包括YARN产生背景、 Hadoop术语解释和版本变迁、 YARN6 |$ P R2 r4 a- p& k/ v# P9 P
架构和通信协议等。 从编程模型角度看, YARN与传统并行编程模式非常像, 但兼具了分布式和并行两个特点; 从资源管理系统
3 m( G; g% ]4 A! p角度看, YARN将扮演为上层计算框架提供计算资源的角色; 从云计算角度看, YARN可看做轻量级的PAAS层。: p" D! n- F/ T2 o3 M! M7 q
在后面几章中, 我们将深入探讨YARN内部实现原理, 以便让读者进一步深层次理解YARN。
" k5 ?, [7 H0 |& ?- ~" k! S7 e1 g! o% |: `5 }$ `" V
2 `( w5 p8 Y; e) R* m
|
|