课程目录: 大数据 hadoop spark flink 开发培训
4401 人关注
(78637/99817)
课程大纲:

       大数据 hadoop spark flink 开发培训

 

 

 

第1章 Hadoop教程 
1 1-1-1大数据简介  
2 1-1-2行业前景  
3 1-1-3hadoop入门  
4 1-1-4hadoop组件介绍 
5 1-1-5集群环境准备 
6 2-1-1hadoop源码编译 
7 2-1-2hadoop 
8 2-1-3伪分布式集群启动及集群操作 
9 2-1-4YARN运行MR程序 
10 2-2-1配置文件core-default(一) 
11 2-2-2配置文件core-default(二) 
12 2-2-3配置文件hdfs-site(一) 
13 2-2-4配置文件hdfs-site(二) 
14 2-2-5配置文件yarn-site 
15 2-2-6配置文件mapred-site 
16 2-3-1环境准备 
17 2-3-2集群规划 
18 2-3-3集群配置 
19 2-3-4启动集群 
20 2-3-5集群的时间同步 
21 2-4-1HDFS详解一(概述) 
22 2-4-2HDFS详解二(命令行操作) 
23 2-4-3HDFS客户端操作 
24 2-4-4HDFS之IO流操作(一) 
25 2-4-5HDFS之IO流操作(二) 
26 2-4-6HDFS之IO流操作(三) 
27 2-5-1YARN资源调度 
28 2-6-1MapReducer入门 
29 2-6-2手写WordCount程序 
30 2-6-3wordCount打包到服务器上运行 
31 2-6-4解决idea打包错误及运行找不到class 
32 2-6-5hadoop序列化与反序列化 
33 2-7-1压缩与解压缩 
34 2-7-2配置hadoop压缩方式及压缩代码实战 
35 2-7-3解压缩代码实战 
36 3-1-1MR运行流程图解 
37 3-1-2MR运行流程及job提交源码解读 
38 3-1-3FileInputFormat源码讲解 
39 3-1-4InputFormat实现类介绍 
40 3-1-5自定义InputFormat代码实战(处理小文件) 
41 3-1-6自定义InputFormat流程解读 
42 3-1-7CombineTextInputFormat 切片 
43 3-2-1partition分区(手机流量统计) 
44 3-2-2reduceTask数量与分区数关系 
45 3-3-1MR排序机制 
46 3-3-2全排序实战 
47 3-3-3部分排序实战 
48 3-3-4订单统计案例分析 
49 3-3-5订单统计代码编写 
50 3-3-6reduce阶段key的获取 
51 3-4-1Redce的并行机制与OutputFormat 
52 3-4-2日志清洗案例(自定义OutputFormat) 
53 3-4-3Join多应用(reduce端多表合并) 
54 3-4-4Join多应用(Map端多表合并) 
55 3-4-5计数器的使用 
56 3-4-6企业MR优化 
第2章 Python教程 25 
57 01-Python入门基础简介  
58 02-1-基于windows搭建开发环境  
59 02-2-基于windows-mac搭建Python环境  
60 02-3-基于Linux搭建Python环境 
61 02-4-变量定义与打印自己的信息 
62 03-1-1-Python字符串类型 
63 03-1-2-Python字符串类型内置函数 
64 03-2-Python数值类型 
65 03-3-Python列表类型 
66 03-4-Python元组-字典类型 
67 03-5-本章总结与3个基础实战 
68 04-1-算数运算符与比较运算符实践 
69 04-2-赋值运算符与逻辑运算符实践 
70 04-3-成员运算符与身份运算符与位运算实践 
71 05-0-Python流程控制简介 
72 05-1-Python流程控制IF语句与For循环实战 
73 05-2-while循环与迭代器与推导式实践 
74 06-1-Python函数与编写规范 
75 06-2-Python函数参数应用 
76 07-1-Python异常简介 
77 07-2-Python异常总结 
78 08-Python面向对象编程 
79 09-Python数据分析简介 
80 10-Python爬虫原理简介 
81 11-PythonRequest库-get请求实践 
第3章 Django教程 
82 00-Django-搭建Django开发环境  
83 01-Django-PythonWEB框架与MVC架构  
84 02-Django-Django的特点和组件  
85 03-Django-创建第一个Django项目 
86 04-Django-设计应用数据结构讲解 
87 05-Django-设计博客系统数据结构 
88 06-Django-激活blog应用并进行数据同步 
89 07-Django-启动管理后台并注册数据表 
90 08-Django-为模型在管理后台定制功能 
91 09-Django-调用Django_API使用QueryS 
92 10-Django-创建QuerySet对象管理器 
93 11-Django-构建视图与URL 
94 12-Django-创建标题模板和博客内容模板 
95 13-Django-博客应用代码问题处理思路 
第4章 Linux教程 
96 01-RHEL7-Linux系统简介与服务器硬件组成  
97 02-RHEL7-Linux控制台使用和shell命令执行  
98 03-RHEL7-Linux系统维护管理命令使用  
99 04-RHEL7-Linux文本编辑器使用 
100 05-RHEL7-Linux远程连接工具使用 
101 06-RHEL7-Linux硬件资源管理与外设设备使用 
102 07-RHEL7-Linux系统运行机制 
103 08-RHEL7-Linux系统用户管理 
104 09-1-RHEL7-Linux文件系统组成 
105 09-2-RHEL7-Linux文件系统组成 
106 09-3-RHEL7-Linux文件系统组成 
107 10-1-RHEL7-Linux文件目录管理 
108 10-2-RHEL7-Linux文件目录管理 
109 10-3-RHEL7-Linux文件目录管理 
110 11-1-RHEL7-Linux文件权限管理 
111 11-2-RHEL7-Linux文件权限管理 
112 11-3-RHEL7-Linux文件权限管理 
113 12-1-RHEL7-Linux文件归档与压缩 
114 12-2-RHEL7-Linux文件归档与压缩 
115 13-1-1-RHEL7-Linux软件包安装管理-RPM 
116 13-1-2-RHEL7-Linux软件包安装管理-RPM 
117 13-2-RHEL7-Linux软件包安装管理-YUM 
118 13-3-RHEL7-Linux软件包安装管理-源码编译 
119 14-1-1-RHEL7-Linux 输入输出重定向 
120 14-1-2-RHEL7-Linux 输入输出重定向 
121 14-2-1-RHEL7-Linux 文件查找-find 
122 14-2-2-RHEL7-Linux 文件查找-find 
123 15-1-RHEL7-Linux进程管理 
124 15-2-RHEL7-Linux进程管理 
125 16-1-RHEL7-Linux 硬盘介绍与磁盘管理 
126 16-2-RHEL7-Linux 磁盘加密应用 
127 17-1-1-RHEL7-Linux 创建LVM逻辑卷 
128 17-1-2-RHEL7-Linux 创建LVM逻辑卷 
129 17-1-3-RHEL7-Linux 创建LVM逻辑卷 
130 17-2-RHEL7-Linux ssm存储管理器使用 
131 17-3-RHEL7-Linux 磁盘配额技巧 
132 18-1-RHEL7-Linux RAID 0磁盘阵列原理 
133 18-2-RHEL7-Linux RAID 1磁盘阵列原理 
134 18-3-RHEL7-Linux RAID 5磁盘阵列原理 
135 实战1-RHEL7-Linux批量添加用户 
136 实战2-1-RHEL6-恢复root密码 
137 实战2-2-RHEL7-恢复root密码 
138 实战3-虚拟机网络配置管理(上网) 
139 实战4-配置在线yum源 
140 实战5-源码编译安装nginx服务器 
141 实战6-升级Linux系统内核 
142 实战7-恢复误删除的文件 
143 实战8-编写自动化解压软件包脚本 
144 实战9-扩容swap分区 
145 01-1-CentOS7-搭建FTP文件传输服务器(理论) 
146 01-2-CentOS7-搭建FTP文件传输服务器(匿名) 
147 01-3-CentOS7-搭建FTP文件传输服务器-本地用户 
148 01-4-CentOS7-搭建FTP文件传输服务器-虚拟用户 
149 02-1-CentOS7-搭建Samba文件共享服务器-理论 
150 02-2-CentOS7-搭建Samba文件共享服务器-实践 
151 03-CentOS7-搭建NFS文件共享服务器 
152 04-1-CentOS7-搭建Apache网站服务器(理论) 
153 04-2-CentOS7-搭建Apache网站服务器(实践) 
154 05-1-CentOS7-搭建Nginx网站服务器-理论实践 
155 05-2-CentOS7-搭建Nginx网站服务器(调优) 
156 06-1-CentOS7-搭建Tomcat网站服务器(理论) 
157 06-2-CentOS7-搭建Tomcat网站服务器(实践) 
158 07-1-CentOS7-搭建Mysql数据库服务(理论) 
159 07-2-CentOS7-搭建Mysql数据库服务(部署) 
160 07-3-CentOS7-搭建Mysql数据库服务(操作) 
161 08-1-CentOS7-搭建LAMP网站架构平台-BBS 
162 08-2-CentOS7-搭建LAMP网站架构平台-BBS 
163 08-3-CentOS7-搭建LAMP网站架构平台-BBS 
164 09-1-CentOS7-搭建LNMP网站架构平台nginx 
165 09-2-CentOS7-搭建LNMP网站架构平台mysql 
166 09-3-CentOS7-搭建LNMP网站架构平台-php 
167 09-4-CentOS7-搭建LNMP网站架构平台-wp 
168 10-1-CentOS7-搭建Redis数据库服务 
169 10-2-CentOS7-搭建Redis数据库服务 
170 11-1-CentOS7-部署Memcached(理论) 
171 11-2-CentOS7-部署Memcached(部署) 
172 11-3-CentOS7-部署Memcached(操作) 
173 12-1-CentOS7-搭建Nginx+PHP动静分离架构 
174 12-2-CentOS7-搭建Nginx+PHP动静分离架构 
175 13-1-CentOS7-搭建Nginx代理服务(理论) 
176 13-2-CentOS7-搭建Nginx代理服务(实践) 
177 14-1-CentOS7-搭建Keepalived服务双机 
178 14-2-CentOS7-搭建Keepalived服务双机 
179 14-3-CentOS7-搭建Keepalived服务双机 
第5章 R语言教程 
180 1-课程介绍  
181 2-数据分析  
182 3-数据挖掘  
183 4-数据可视化 
184 5-R语言介绍 
185 6-举个例子 
186 7-R语言的使用 
187 8-运行与设置 
188 9-Rstudio 
189 10-基本操作 
190 11-R包的介绍 
191 12-R包的使用 
192 13-获取帮助 
193 14-Excel案例 
194 15-内置数据集 
195 16-数据结构 
196 17-向量 
197 18-向量索引 
198 19-向量运算 
199 20-矩阵与数组 
200 21-列表 
201 22-数据框 
202 23-因子 
203 24-缺失数据 
204 25-字符串 
205 26-日期和时间 
206 27-常见错误 
207 28-获取数据 
208 29-读入文件(一) 
209 30-读入文件(二) 
210 31-写入文件 
211 32-读写Excel文件 
212 33-读写R格式文件 
213 34-数据转换(一) 
214 35-数据转换(二) 
215 36-数据转换(三) 
216 37-数据转换(四) 
217 38-reshape2 
218 39-tidyr 
219 40-dplyr 
220 41-R函数 
221 42-选项参数 
222 43-数学统计函数 
223 44-描述性统计函数 
224 45-频数统计函数 
225 46-独立性检验函数 
226 47-相关性分析函数 
227 48-相关性检验函数 
228 49-绘图函数 
229 50-自定义函数 
230 51- 数据分析实战 
231 52-线性回归(一) 
232 53-线性回归(二) 
233 54-多元线性回归 
234 55-回归诊断 
235 56-方差分析(一) 
236 57-方差分析(二) 
237 58-功效分析 
238 59-广义线性模型 
239 60-Logistic回归 
240 61-主成分分析 
241 62-因子分析 
242 63-购物篮分析 
第6章 Matlab教程 
243 0.1 matlab软件与仿真技术简介  
244 1.1.1 Matlab的系统结构  
245 1.1.2 Matlab的特点  
246 1.1.3MATLAB的工具箱 
247 1.2.1MATLAB 的菜单和工具栏 
248 1.2.2 通用窗口 
249 1.3.1 matlab的文件格式和搜索设置 
250 1.4 Notebook的启动 
251 1.5 帮助系统 
252 1.6 实例与练习 
253 2.1.1表达式-常量 
254 2.1.2 变量与基本函数 
255 2.1.3表达式运算和复数运算 
256 2.1.4数组排序、维数和运算 
257 2.2.1 数组的创建、保存和装载 
258 2.2.2 数组寻址和赋值 
259 2.2.3 矩阵的创建 
260 2.2.4矩阵的元素、维数、赋值和重排 
261 2.2.5 矩阵的运算 
262 2.2.6矩阵复制和稀疏矩阵 
263 2.2.7逆矩阵、方阵及特征向量 
264 2.2.8利用矩阵解线性方程组 
265 2.2.9 综合实例 
266 3.1.1 基本绘图函数 
267 3.1.2 图形标注和图形控制 
268 3.1.3 其他二维图形的绘制 
269 3.2.1三维图形绘制(1) 
270 3.2.2 三维图形绘制(2) 
271 3.2.3 网格图和柱形图 
272 3.2.4 绘图控制 
273 3.3.1 特殊图形的绘制(1) 
274 3.3.2 特殊图形的绘制(2) 
275 3.4.1 综合实例-绘制模拟喷泉的散点图 
276 3.4.2 综合实例-绘制股票k线 
277 4.1.1 创建符号对象与表达式 
278 4.1.2 符号表达式运算(1) 
279 4.1.3 符号表达式运算(2) 
280 4.2 符号极限和倒数 
281 4.3 符号积分 
282 4.4 符号级数 
283 4.5 代数方程的符号解 
284 4.6 常微分方程的符号解 
285 4.7.1 综合实例1 
286 4.7.2 综合实例2 
287 5.1.1 关系运算和逻辑运算 
288 5.2.1 顺序语句和循环语句(1) 
289 5.2.2 顺序语句和循环语句(2) 
290 5.3 条件语句 
291 5.4 试探结构和流控制命令 
292 5.5 综合实例 
293 5.6 新建M文件 
294 5.7 保存M文件和运行 
295 5.8 脚本和M函数 
296 5.9 其他函数类型(1) 
297 5.10 其他函数类型(2) 
298 5.11 函数变量与空间 
299 5.12 函数综合实例(1) 
300 5.13 函数综合实例(2) 
301 6.1 simulink窗口 
302 6.2 模型构成和步骤 
303 6.3 建模方法 
304 6.4 模块连接 
305 6.5 输入输出数据 
306 6.6 运行仿真 
307 6.7 启动系统仿真 
308 6.8 库模块介绍1 
309 6.9 库模块介绍2 
310 6.10 库模块介绍3 
311 7.1 GUIDE界面环境 
312 7.2 输出编辑器,控件和界面 
313 7.3 回调函数 
314 7.4 GUI的创建 
315 7.5 GUI菜单设计(1) 
316 7.6 GUI菜单设计(2) 
317 7.7 对话框设计 
318 7.8 综合案例 
319 8.1 直流稳态电路的建模与仿真分析 
320 8.2 网孔电流法 
321 8.3 结点电压法 
322 8.4 动态电路的建模与仿真 
323 8.5 正弦交流电路的建模与仿真分析 
324 8.6 阻抗的并联和功率因数的提高 
325 8.7 三相交流电路 
326 8.8 直流磁路的建模与仿真分析 
327 9.1 直流电动机的建模与仿真 
328 9.2 电机仿真参数设置(1) 
329 9.3 电机仿真参数设置(2) 
330 9.4 三相异步电动机的建模 
331 9.5 异步电动机仿真参数设置 
332 9.6 三相交流异步电动机在不同坐标系下的建模与仿真 
333 10.1 测控系统的典型数学模型 
334 10.2 时域分析法 
335 10.3 频域分析法 
336 11.1 过程控制系统基本介绍 
337 11.2 过程控制系统的组成和系统模型 
338 11.3 数字PID控制器 
339 11.4 数字PID控制仿真实例 
340 12.1 模糊PID控制器 
341 12.2 模糊控制工具箱的应用 
342 12.3 模糊控制器及其MATLAB实现 
343 12.4 模糊推理和仿真实例 
第7章 Java教程 
344 01-JAVA-Java语言环境  
345 02-JAVA-使用Eclipse集成开发环境  
346 03-JAVA-变量与运算  
347 04-JAVA-流程控制 
348 05-JAVA-类与对象 
349 06-JAVA-构造函数 
350 07-JAVA-继承的概念 
351 08-JAVA-继承的使用 
352 09-JAVA-抽象类与抽象函数 
353 10-JAVA-Java的异常 
354 11-JAVA-Java的IO 
355 12-JAVA-包与访问权限 
356 13-JAVA-Java的接口 
357 14-JAVA-Java数组与集合 
358 15-JAVA-Java常用类 
359 16-JAVA-Java多线程