|
|
课程目录：
: R& i/ ^1 B* @0 V2 z5 q( L
' M3 i. e1 q: N9 }% O; D4 ?4 j01.Spark简介 00:03:19
% P6 B4 g' E3 ~1 a, G$ N$ A02.Spark预编译版本下载安装与启动 00:15:49
- O! S. H( u% a; x03.Spark体验shell操作与wc操作与RDD介绍 00:20:40
% c: u# r$ {" p5 e04.Spark通过Maven进行源码编译安装 00:25:24
7 l/ O3 t! Q. ?8 z05.Spark搭建Maven本地仓库服务器 00:23:39
8 Y/ Y, v9 R2 M& \# F06.Spark通过本地Maven仓库服务器进行编译以及进行描述文件的设置 00:08:255 i: | F- o5 }4 h) Z( W5 G
07.Spark官方doc的宏观描述和优势说明 00:10:29$ ]7 D% \2 g. h6 x) o. p/ ^7 X' M" k3 q
08.Spark独立集群模式部署和启动 00:32:06% G1 i5 o5 Q1 S$ B; p; b9 b4 a
09.Spark Master和Worker的webui查看以及FIFO作业调度讲解 00:09:43/ _" W6 I; }" P# F
10.Spark独立集群模式端口修改 00:11:168 Z5 J1 q3 \0 z9 f0 q( g1 b
11.Spark shell应用于addFile 00:24:37
+ H5 \" t; L, t: R8 ?/ l: c3 W12.Spark程序build的宏观介绍 00:03:24" k* ]4 u! s0 A' @8 Q( S+ b
13.通过交互模式初始化Maven项目 00:11:109 G6 M+ D% m- f
14.通过参数指定方式直接初始化Maven项目 00:04:19
* j" Z2 \3 t, f9 ]* q0 g5 Y15.准备java源文件到自己的源码包中 00:04:43: y: ^5 Q: N' V! x Z
16.设置pom.xml文件依赖插件以及与自由仓库目录树的对应关系 00:08:46
. C" I2 M9 o& e0 y17.使用mvn package指令进行编译并进行打包与自由仓库目录树的对应关系 1 00:05:09
+ p; P1 j3 }" R6 R5 K1 X18.使用java指令添加spark类库运行Spark程序 00:05:218 ^' Q9 Z- M5 r: D' S
19.使用maven的exec执行插件运行java程序 00:05:44
2 o: {, s) i* h9 B* \1 z20.配置eclipse的maven插件使用本地maven仓库服务器 00:04:38
. l Y4 s. P' ]$ `3 R3 h9 U6 H, i21.eclipse之下maven项目的配置编译运行 00:16:33
* D4 c8 X* i" O- K22.eclipse之Scala插件的卸载与安装 00:05:02
1 m- b: T8 L6 t$ E& K4 i% g9 h6 ]9 C23.eclipse下构建Scala程序以及运行 00:02:45
$ r7 ~ x8 x. j1 m' A9 u24.通过Scalac命令手动编译scala程序并执行 00:13:16
/ n/ m7 Q2 t0 {6 \# U; A25.命令行下通过maven编译运行Scala程序 00:10:15# S: F/ L: U: x
26.eclipse下通过maven-scala插件进行Spark（Scala版）应用的开发 00:05:59' O K' b# J d \3 H
27.创建SparkContext简介与环境准备 00:04:59
' u) w" s$ T1 ~& t$ L28.使用Scala创建SparkContext对象以及conf配置和调试 00:11:32
/ X& W: i: z5 s, {8 K, ~) R29.使用Java创建SparkContext对象以及元数据介绍 00:11:30
) U- g2 A/ m% g5 ?. \30.使用Java创建Rdd对象并在eclipse运行 00:04:40
4 [ o7 n1 g) C# ]% H31.使用Scala创建Rdd对象并在eclipse调试分布式应用 00:17:095 n& G3 D4 a6 B( _1 a0 v, R) [
32.addFile方法的使用与常见错误 00:21:53
" F t F, Z5 k$ `9 B, B0 {5 r& o33.flatMap函数处理csv文件进行扁平化RDD处理 00:21:01
1 f" Z- H$ Q0 T
& n: D! U, j. t) m4 C1 F0 j D5 u. }6 f& e
* q3 y' S, B9 q* M) u1 u* X5 F- n ]3 |: U2 j
4 J% o" _, F6 X3 {3 C9 I' M6 D( O8 s$ N2 u2 S, `
资源下载地址和密码（百度云盘）： [/hide] 百度网盘信息回帖可见- N( b8 P: I- j$ f7 i7 c
0 b; c6 B6 @, j* e! o
% H7 w8 ]+ h* D8 F1 V, }' i
7 o1 F, _, T* O: `# I: V
本资源由Java自学网收集整理【www.javazx.com】 |
|
发表于 2022-6-29 07:03:01
