|
|
课程大纲
+ Q' M/ A3 W, v, J, R' u. z) B
8 n; Z- b( \5 J) Q: }第一周：Hbase系统搭建与部署，Hbase shell操作/ o" K0 j1 Q5 m( k$ ?% u. a
! y# y, b8 ^* m8 z3 Q
学习内容：8 B6 s- W5 z6 a
Hbase系统搭建与部署，Hbase shell操作；9 _; T/ I. t9 `1 f7 Z1 W9 I: |
客户端API操作，包括put、get、delete方法以及批量处理操作与客户端缓存，HTable类与Bytes类的使用；/ {) d0 T7 t; A7 e1 f; e: o o" B1 r
比较过滤器、专用过滤器、附加过滤器、自定义过滤器的使用
5 h& y4 y+ N$ k( Z计数器的使用，协处理器（coprocessor类、regionobserver类、masterobserver类、endpoint）的使用1 }) v$ w! l' B# S+ a+ I
HTablePool类的使用3 E8 T; C/ F, Z, i( B. a. i
" D' u$ j; n$ U, q& w: h$ o实战：
' w2 R8 t8 y9 ` M搭建Hbase集群；使用Hbase shell进行表的操作；利用Hbase API编写客户端工具操作Hbase集群
9 F" G( f5 t4 b( r3 }1 j; g) | {$ o1 N$ n0 |2 [
收获内容：
4 E; B; K* a* g. ]7 V熟练掌握Hbase集群的搭建，能够利用Hbase shell对数据进行操作与查询；# ]' B) B% P' F h0 G8 ?2 ]
熟练使用客户端API，了解过滤器、计数器、协处理器以及HTablePool的使用# o& A# y3 W# O0 a
$ ]3 x' Y w5 K7 n% j2 a9 ]3 m第二周：客户端API的管理功能、MapReduce系统集成+ `. [7 _9 g; x; i7 j9 n. M9 X& `( U
$ }) {4 t: u+ j; e* D
学习内容：% O+ a" _4 x+ i8 \
利用HbaseAdmin类进行Hbase表的管理，包括表、属性、列的操作；" B# O Z+ J) l) H7 |6 I6 ~
MapReduce集成，编写Mapreduce程序实现对HBase表的select，多表join，聚合操作，sort等功能
- t% D! `' x2 M7 B. F9 D" ?
& R1 T, @" m; o4 \% @8 \实战：
7 K g# I' q2 F. q& O7 Q% G; I通过利用Mapreduce实现数据的查询、聚合、连接等操作
& K: w4 i% j1 ?5 O" F4 M4 u" {7 l9 n0 r5 @, D `# A0 e* p
收获内容：9 c, m) i5 j1 V% j0 V. E0 z
掌握基于Hbase的Mapreduce程序编写，实现对表的操作2 x5 ^" Q2 l! z& P2 p; _5 \
: Q: o7 j& Q5 E( q" E; c" x
第三周：HBase系统架构原理. z& \2 V: D# l) W1 H6 y- a+ K% B
; f0 ~) L. \5 c4 h/ d4 }4 O
主要介绍：
/ u/ `* D/ E# dHbase中数据的查找与传输，数据结构B+树、LSM树介绍；
, j- m5 ^) f8 q: _: W数据存储格式HFile格式、KeyValue格式；
$ `7 b& {( L+ A7 b w+ ]WAL机制，HLog类、HLogKey类、WALEdit类、LogSyncer类、回放与持久性；
' A, R5 o' Z3 fregion、-root-表的查找；
1 p, x" R7 `6 k2 o6 g' ~* oLogEdit的生命周期与内部机制；5 o% b- B% a9 ^. G k1 T
Coprocessor实现；
+ p3 d# M" {0 Q, s二级索引HIndex原理
9 K8 R6 V# K5 Z
/ O; {* t# C8 ^% `: C0 v X& o实战：
5 |3 S! Q9 i6 ]9 A自定义Coprocessor的实现；HIndex的使用
! I {7 X9 V: e0 X J8 q2 T+ s) l$ N5 ]) O, N
收获内容：
- v2 ^* O; d- i% |" U9 K了解WAL机制
5 J" {* j) B, YCoprocessor的内部实现
( D# r4 v3 k$ y& ]- K! ]: x5 r二级索引HIndex的实现原理
8 I( |2 i, \5 E( V
0 k" l' Y2 v& G第四周：HBase高级用法
0 R- d9 f; |; C3 X& o' F! Z" v6 d$ f. H9 w o! i" @) n
主要介绍： ^( n6 z. o; E: h' z- R, x
Hbase表的行键设计，高表与宽表、部分键扫描、分页、时间序列、时间顺序关系；
8 c, K; t: v+ b0 X高级模式；
9 M; L& H+ b9 ^* p% l! P辅助索引；9 q9 N; {- T5 k9 r
搜索集成；
5 o' Q2 S6 `0 F事务；
# O* ~( O4 ^4 k" u# h8 }6 W' dBloomFilter布隆过滤器；; k" X0 N- x g" ^+ f. k
隐式版本控制与自定义版本控制/ B2 K1 Z$ v) F7 G' ]. k
+ t5 d+ ], c' J' Z6 O* ?. ?实战：% ?- n$ S& ]/ |9 R' c
Hbase表的行健设计
; x1 E$ S, }+ U, a" p, w. n8 j% [& k, Y
收获内容：) G9 w; T, X0 W E8 i& Q6 l
Hbase的高级用法，Hbase行健设计的一般方法与各自的特点' m8 K$ u5 t; U8 c
3 I; \) @9 L9 L第五周：HBase系统集成与案例实战
4 b0 f W+ v* `+ \/ F
! d& H. ]/ C( p' e主要介绍：2 x S, h! k% R+ g
利用hbase、Solr和Solr-IndexBuilder，设计与实现一个在线Hbase数据存储与实时查询系统，构建基于Hbase的SQL查询系统
% K) u: R( g5 B( v3 A; A& e实战：设计与开发一套数据存储与实时查询系统& Q6 M4 X5 k6 O1 F
! ^) T& a) g* a) o8 L$ y! f7 \5 n
收获内容：4 T2 }6 }0 l4 g8 _( B
从系统设计、开发、集成的角度，掌握Hbase的各项操作与性能优化方案，构建自己的实时查询系统: l4 G% }% O1 N7 _% l
V% I/ S8 ~6 ~4 J4 ~下载地址:. K4 H! Z9 j* g' L2 C1 s l
) W4 d) d% d' e h3 Z资源下载地址和密码（百度云盘）： [/hide] 百度网盘信息回帖可见
; i4 K; }+ Y6 ]8 X1 ?# N3 ^) E% p; `+ V' f
2 _, ~/ B: q$ _, R7 J7 a9 j# @8 b
5 M1 j# a; t3 s: ?% @7 o本资源由Java自学网收集整理【www.javazx.com】 |
|
发表于 2022-6-17 22:18:01
