java自学网VIP

Java自学网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 12621|回复: 65

【java电子书】Spark最佳实践 高清晰 PDF 电子书 百度云 百度网盘下载

  [复制链接]
  • TA的每日心情
    开心
    2021-5-25 00:00
  • 签到天数: 1917 天

    [LV.Master]出神入化

    2025

    主题

    3683

    帖子

    6万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    66375

    宣传达人突出贡献优秀版主荣誉管理论坛元老

    发表于 2017-8-3 15:48:01 | 显示全部楼层 |阅读模式
    java自学网(www.javazx.com)-java论坛,java电子书推荐:《Spark最佳实践 》
    ; a% p! v2 K& \' A+ wjava电子书推荐理由:腾讯专家传授实战经验,通过实战项目介绍Spark SQL、Spark Streaming、Spark GraphX和Spark MLib功能模块。此外,本书详细介绍了常见的实战问题,比如大数据环境下的配置设置、程序调优等。本书附带的一键安装脚本,更能为初学者提供很大帮助。# l9 c$ n3 P9 d# M5 {2 s7 s
    作者:陈欢 林世飞1 m5 Q' E0 V  W- u
    出版社:人民邮电出版社
    # K- i% r+ h. C; J出版时间:2016年05月 $ s4 p9 [  e7 T6 {$ m" d' A; r
      m' b  x- c5 E( U6 O4 e
    QQ截图20170803154010.png
    2 g( O# W# ^8 b8 u2 b8 N& A! G) {* J2 X8 e

    - d1 j8 G- C7 _3 h- |. ?java电子书目录:2 u  N4 h8 i' D- Q- w
    ( B; y8 G2 a3 d

    第1章  Spark与大数据  1

    1.1  大数据的发展及现状  1

    1.1.1  大数据时代所面临的问题  1

    1.1.2  谷歌的大数据解决方案  2

    1.1.3  Hadoop生态系统  3

    1.2  Spark应时而生  4

    1.2.1  Spark的起源  4

    1.2.2  Spark的特点  5

    1.2.3  Spark的未来发展  6

    第2章  Spark基础  8

    2.1  Spark本地单机模式体验  8

    2.1.1  安装虚拟机  8

    2.1.2  安装JDK  19

    2.1.3  下载Spark预编译包  21

    2.1.4  本地体验Spark  22

    2.2  高可用Spark分布式集群部署  25

    2.2.1  集群总览  26

    2.2.2  集群机器的型号选择  28

    2.2.3  初始化集群机器环境  29

    2.2.4  部署ZooKeeper集群  33

    2.2.5  编译Spark  35

    2.2.6  部署Spark Standalone集群  37

    2.2.7  高可用Hadoop集群  40

    2.2.8  让Spark运行在YARN上  40

    2.2.9  一键部署高可用Hadoop Spark集群  42

    2.3  Spark编程指南  43

    2.3.1  交互式编程  43

    2.3.2  RDD创建  44

    2.3.3  RDD操作  47

    2.3.4  使用其他语言开发Spark程序  54

    2.4  打包和提交  54

    2.4.1  编译、链接、打包  54

    2.4.2  提交  56

    第3章  Spark工作机制  58

    3.1  调度管理  58

    3.1.1  集群概述及名词解释  58

    3.1.2  Spark程序之间的调度  60

    3.1.3  Spark程序内部的调度  63

    3.2  内存管理  65

    3.2.1  RDD持久化  65

    3.2.2  共享变量  66

    3.3  容错机制  67

    3.3.1  容错体系概述  67

    3.3.2  Master节点失效  68

    3.3.3  Slave节点失效  69

    3.4  监控管理  69

    3.4.1  Web界面  69

    3.4.2  REST API  72

    3.4.3  Metrics指标体系  73

    3.4.4  其他监控工具  73

    3.5  Spark程序配置管理  73

    3.5.1  Spark程序配置加载过程  74

    3.5.2  环境变量配置  74

    3.5.3  Spark属性项配置  74

    3.5.4  查看当前的配置  76

    3.5.5  配置Spark日志  76

    第4章  Spark内核讲解  77

    4.1  Spark核心数据结构RDD  77

    4.1.1  RDD的定义  78

    4.1.2  RDD的Transformation  80

    4.1.3  RDD的Action  82

    4.1.4  Shuffle  83

    4.2  SparkContext  84

    4.2.1  SparkConf配置  84

    4.2.2  初始化过程  85

    4.2.3  其他功能接口  87

    4.3  DAG调度  87

    4.3.1  DAGScheduler  87

    4.3.2  TaskScheduler  90

    第5章  Spark SQL与数据仓库  92

    5.1  Spark SQL基础  93

    5.1.1  分布式SQL引擎  93

    5.1.2  支持的SQL语法  97

    5.1.3  支持的数据类型  98

    5.1.4  DataFrame  99

    5.1.5  DataFrame数据源  103

    5.1.6  性能调优  104

    5.2  Spark SQL原理和运行机制  104

    5.2.1  Spark SQL整体架构  105

    5.2.2  Catalyst执行优化器  105

    5.3  应用场景:基于淘宝数据建立电商数据仓库  110

    5.3.1  电商数据仓库场景  111

    5.3.2  数据准备和表设计  111

    5.3.3  用Spark SQL来完成日常运营数据分析  115

    5.3.4  Spark SQL在大规模数据下的性能表现  120

    第6章  Spark流式计算  122

    6.1  Spark Streaming基础知识  123

    6.1.1  入门简单示例  123

    6.1.2  基本概念  124

    6.1.3  高级操作  129

    6.2  深入理解Spark Streaming  132

    6.2.1  DStream的两类操作  132

    6.2.2  容错处理  134

    6.2.3  性能调优  136

    6.2.4  与Storm的对比  137

    6.3  应用场景:一个类似百度统计的流式实时系统  139

    6.3.1  Web log实时统计场景  139

    6.3.2  日志实时采集  140

    6.3.3  流式分析系统实现  140

    第7章  Spark图计算  149

    7.1  什么是图计算  149

    7.1.1  图的基本概念  149

    7.1.2  图计算的应用  150

    7.2  Spark GraphX简介  151

    7.2.1  GraphX实现  151

    7.2.2  GraphX常用API介绍  152

    7.3  应用场景:基于新浪微博数据的社交网络分析  153

    7.3.1  社交网络分析的主要应用  153

    7.3.2  社区发现算法简介  154

    7.3.3  用GraphX实现Louvain算法  156

    7.3.4  小试牛刀:谁是你的闺蜜  162

    7.3.5  真实的场景:新浪微博关系分析  164

    第8章  Spark MLlib  169

    8.1  机器学习简介  169

    8.1.1  什么是机器学习  169

    8.1.2  机器学习示例  171

    8.1.3  机器学习的基本方法  172

    8.1.4  机器学习的常见技巧  173

    8.1.5  机器学习参考资料  174

    8.2  MLlib库简介  174

    8.2.1  基础数据类型  174

    8.2.2  主要的库  175

    8.2.3  附带的示例程序  176

    8.3  应用场景:搜索广告点击率预估系统  178

    8.3.1  应用场景  178

    8.3.2  逻辑回归  179

    8.3.3  学习算法  181

    8.3.4  模型评估  184

    8.3.5  数据准备  186

    8.3.6  模型训练  187

    8.3.7  模型调优  195

    附录  Scala语言参考  197

    ( l  E, R5 d9 m/ `  D. E
    百度网盘下载地址链接(百度云):java自学网(javazx.com)Spark最佳实践  PDF 高清 电子书 百度云.rar【密码回帖可见】% Y* b1 a# V  V
    游客,如果您要查看本帖隐藏内容请回复

    + }" M& G6 v9 s1 q
    * u- k+ w' b9 E/ v" {2 w) U
    : t0 s; {: L; _( @' y" d
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2017-8-5 06:48
  • 签到天数: 2 天

    [LV.1]初学乍练

    0

    主题

    139

    帖子

    303

    积分

    普通会员

    Rank: 2

    积分
    303
    发表于 2017-8-4 09:46:45 | 显示全部楼层
    补哦错啊 !!!!
    回复

    使用道具 举报

  • TA的每日心情
    无聊
    2019-10-10 12:42
  • 签到天数: 98 天

    [LV.6]炉火纯青

    0

    主题

    184

    帖子

    1444

    积分

    普通会员

    Rank: 2

    积分
    1444
    发表于 2017-8-4 10:37:38 | 显示全部楼层
    看看 学习了
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2021-5-3 06:14
  • 签到天数: 451 天

    [LV.9]功行圆满

    1

    主题

    845

    帖子

    30万

    积分

    终身VIP

    Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60

    积分
    307967
    发表于 2017-8-4 14:12:56 | 显示全部楼层
    1111111111111111111111111111
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    无聊
    2017-11-28 16:40
  • 签到天数: 4 天

    [LV.2]登堂入室

    0

    主题

    9

    帖子

    53

    积分

    普通会员

    Rank: 2

    积分
    53
    发表于 2017-8-4 15:19:20 | 显示全部楼层
    ASDADASDDDDDDDDDDDDD
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2018-10-3 00:01
  • 签到天数: 5 天

    [LV.2]登堂入室

    1

    主题

    24

    帖子

    118

    积分

    普通会员

    Rank: 2

    积分
    118
    发表于 2017-8-7 01:55:26 | 显示全部楼层
    感谢分享,好好学习!!!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    郁闷
    2020-12-13 15:17
  • 签到天数: 299 天

    [LV.8]已臻大成

    0

    主题

    445

    帖子

    5016

    积分

    普通会员

    Rank: 2

    积分
    5016
    发表于 2017-8-7 07:23:58 | 显示全部楼层
    下来学习,谢谢
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2017-8-20 15:36
  • 签到天数: 1 天

    [LV.1]初学乍练

    0

    主题

    129

    帖子

    267

    积分

    普通会员

    Rank: 2

    积分
    267
    发表于 2017-8-20 18:11:15 | 显示全部楼层
    谢谢楼主分享谢谢谢谢
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2021-5-5 18:20
  • 签到天数: 88 天

    [LV.6]炉火纯青

    1

    主题

    326

    帖子

    70万

    积分

    终身VIP

    Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60Rank: 60

    积分
    702073
    发表于 2017-8-31 20:23:35 | 显示全部楼层
    java自学网给力 亲测资源可以
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2020-11-25 19:07
  • 签到天数: 13 天

    [LV.3]初窥堂奥

    0

    主题

    22

    帖子

    213

    积分

    普通会员

    Rank: 2

    积分
    213
    发表于 2017-9-1 10:47:10 | 显示全部楼层
    不错的资源收下了谢谢楼主
    回复 支持 反对

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|Archiver|手机版|小黑屋|Java自学网

    GMT+8, 2024-12-22 12:08 , Processed in 0.179174 second(s), 33 queries .

    Powered by Javazx

    Copyright © 2012-2022, Javazx Cloud.

    快速回复 返回顶部 返回列表