企业级Spark零基础到项目实战开发全套


企业级Spark零基础到项目实战开发全套


零基础到开发的spark教程

01 Spark介绍

001 本系列公开课程说明

002 What is Spark详细讲解(四大特性)

003 MapReduce与Spark异同点和优势比较

004 实时在线答疑交流

02 Spark 1.3 编译

005 回顾上次课内容和Spark 学习的基础

006 Spark 1.x编译的三种方式和如何使用Make方式编译(注意事项详解)

007 Spark运行Local模式讲解

008 课程实时在线答疑交流

03 Spark 环境搭建

009 Spark 1.x安装前的准备(安装HDFS)

010 安装部署Spark 1.x Standalone模式集群

011 运行Spark Shell进行测试以及对细节进行说明

012 使用Spark 编写大数据处理经典案例WordCount程序

04 Spark RDD讲解

013 深入讲解使用Spark编程WordCount程序

014 Spark RDD详解

015 实时在线答疑

05 如何使用IDEA开发程序

016 回顾总结前面内容及如何学习Spark

017 Spark Cluster与Application中的重要概念以及如何提交应用spark-submit

018 如何安装IDEA、安装Scala插件以及导入Spark 源码

019 如何使用IDEA创建Scala Project、编写Spark应用及local测试

020 如何使用IDEA对Spark Application进行打包测试

06 RDD操作详解

21 Spark RDD创建的两种方式一

22 Spark RDD创建的两种方式二

23 Spark RDD两种类型的操作(Transformation和action)

24 Spark RDD操作之Transformation讲解(结合源码分析)

25 Spark RDD操作之Action讲解(结合源码分析)

26 Spark RDD缓存persistent讲解(cache、结合源码分析)

07 Spark JobHistory与Spark on YARN

27 Spark Application Monitor(应用运行时监控)

28 Spark JobHistory(应用完成以后监控)

29 Hadoop YARN如何进行资源管理和调度应用

30 Spark Application如何运行在YARN上

31 Spark应用运行时的部署模式client与cluster

32 Spark App运行在YARN上

08 Spark内核分析

33 Spark编程模型SparkContext详解

34 通过源码分析SparkConf的作用

35 Spark内核分析之Spark Scheduler讲解(结合WordCoun程序)

36 Spark内核分析之通过代码调试分析SparkContext启动过程一

37 Spark内核分析之通过代码调试分析SparkContext启动过程二

38 Spark内核分析之跟踪源码分析Spark 如何提交应用

包含三本电子书:

《企业级Hadoop 2.x项目实战》V3

《企业级Hive实战课程》大纲(第一版)

《企业级Spark 1.x从菜鸟到高手精品进阶课程》大纲V1

相关资源

发表评论

点 击 提 交