课程大纲：

Spark 大数据培训

1 Spark 的安装与配置

2 Spark SQL 基础知识及使用案例

3 Spark 机器学习基础知识及使用案例

4 Spark Streaming 基础知识及使用案例

5 Spark GraphX 基础知识及使用案例

1
Spark 简介与安装部署

1.Spark核心概念

2.Spark生态系统BDAS

3.Spark单机模式部署

4.Spark集群模式部署

5.SparkShell的基本使用

6.启动Spark服务

2
Scala 编程快速教程

1.Scala基础概念

2.Scala交互式命令行

3.Scala基础语法：值、标识符、运算符、注释等

4.Scala数据类型，变量

5.Scala函数与类

6.Scala的集合

3
Spark RDD 简介与操作

1.RDD简介

2.连接并初始化Spark

3.SparkRDD数据源

4.RDD的转化操作

5.RDD的行动操作

4
Spark RDD 高级应用与持久化

1.向Spark传递函数

2.理解闭包

3.共享变量

4.键值对RDD

5.不同类型RDD之间的转换

6.RDD缓存、持久化

5
Spark 应用开发入门

1.Spark编程模型

2.词频统计算法

3.Scala语言开发Spark应用

4.编译打包提交到集群执行

6
Spark 分析 Apache 日志

1.Apache日志文件格式

2.Scala语言开发Spark应用

3.Spark日志分析的基本方法

7
Spark Streaming 入门实战

1.SparkStreaming简介

2.StreamingContext的初始化

3.输入源

4.转化操作

5.输出操作

6.项目实例

8
Spark SQL 入门实战

1.SparkSQL简介

2.SparkSQL编程实例

3.支持多种数据源

4.将RDDs转化为DataFrame

9
Spark GraphX 入门实战

1.GraphX简介

2.属性图

3.一个属性图的例子

4.项目实例

5.其它扩展

10
Spark 机器学习入门实战

1.MLlib简介

2.使用sparkmllib的项目实例

3.使用sparkml的项目实例