|
课程介绍:0 t) U3 n/ [0 W/ Y; g8 K2 n
1 U+ {2 \& J; [# F- j
Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。- F1 A* [2 y+ {5 f; _6 ^' z/ j. W
Spark 是一种与 Hadoop 相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使 Spark 在某些工作负载方面表现得更加优越,换句话说,Spark 启用了内存分布数据集,除了能够提供交互式查询外,它还可以优化迭代工作负载。7 [$ e8 J/ h; I1 L4 i" X/ W
Spark 是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架。与 Hadoop 不同,Spark 和 Scala 能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。
$ T8 x% ^4 P2 I. S& @尽管创建 Spark 是为了支持分布式数据集上的迭代作业,但是实际上它是对 Hadoop 的补充,可以在 Hadoop 文件系统中并行运行。通过名为 Mesos 的第三方集群框架可以支持此行为。Spark 由加州大学伯克利分校 AMP 实验室 (Algorithms, Machines, and People Lab) 开发,可用来构建大型的、低延迟的数据分析应用程序。
- }9 z& L4 b7 U- b. F# m) N4 g( H; a! z, S* j- D0 g
课程目录:
4 W; i, \3 _# y" j% H& p& i& h$ Z% Y
. F* w, Z' G+ N7 I( v9 {第01课:大数据最火爆语言Scala光速入门.mp4
8 f* O# y7 z7 m, A' r第02集:Scala面向对象彻底精通及Spark源码阅读.mp4' |0 j; c! i/ ]" M# w, i4 B: p- Z. g
第03课:Scala函数式编程彻底精通及Spark源码阅读.mp4' {3 i: ~' \1 E6 B' q1 \! O
第04课:Scala模式匹配、类型系统彻底精通与Spark源码阅读.mp4
) G' f- W! p7 ~$ F, ?" F0 I g& ?1 D第05课:彻底精通Scala隐式转换和并发编程及Spark源码阅读.mp4
, V y5 O+ e; z1 b; i/ p: C第06课:精通Spark集群搭建与测试.mp4
' V, ?- U \. f4 C: e, q第07课:实战解析Spark运行原理和RDD解密.mp4
# ]3 A2 b: c5 W# v第08课:彻底实战详解使用IDE开发Spark程序.mp4.mp4* {8 I0 e/ u# M& \$ B' c
第09课:彻底实战详解 IntelliJ IDEA下的Spark程序开发.mp4
v" Q* W" h9 U% x第10课:底实战详解使用Java开发Spark程序.mp43 `; T0 ]7 @( A4 o3 c
第11课:彻底解密WordCount运行原理.mp4) d3 H. @( Q& \2 T: P
第12课:HA下的Spark集群工作原理解密.mp4
. ]2 f7 A# O/ m. a) r. a第13课:Spark内核架构解密.mp4+ E' k' F% }8 ^" O ~7 A" Q; g
第14课:Spark RDD解密.mp4
; i) p1 ~& u" d第15课:RDD创建内幕彻底解密.mp4
5 x8 H- E$ a4 a N: [* L+ {6 t' F0 `4 T- v) G3 H( ^' O
& i9 j( `& }2 E0 u- c* l" f% L0 E$ y
5 q3 K! j1 ~: F" V) a" g8 r
/ {; a: _. Y ~2 S, \: ]" J$ d6 S7 F- u( q2 T$ F
5 O9 F' c7 A& D! o% @( E% K ~资源下载地址和密码(百度云盘): [/hide] 百度网盘信息回帖可见4 p. {- j2 S- M) X/ }
: l# [# \& x" y" [; P4 x- Y/ l8 H8 b; C
3 J1 O, U k; _$ t本资源由Java自学网收集整理【www.javazx.com】 |
|