2020年最新尚谷大数据技术之Spark

视频教程大纲

 

课程目录

1.笔记# x. V+ {: O3 t, J. u

01_尚硅谷大数据技术之SparkCore.docx

02_尚硅谷大数据技术之SparkSql.docx

03_尚硅谷大数据技术之SparkStreaming.docx

04_尚硅谷大数据技术之Spark内核.docx

05_尚硅谷大数据技术之Spark优化.doc

3.视频

day01

01 – Spark – Hadoop发展历史.avi

01 – Spark – 概念介绍.avi

02 – Spark – Spark和MR对比.avi

03 – Spark – Spark核心模块.avi

04 – Spark – 案例 – WordCount – 环境准备.avi

05 – Spark – 案例 – WordCount – 代码实现.avi

06 – Spark – 案例 – WordCount – 功能补充.avi

day02

07 – Spark – 环境 – 本地环境local.avi

08 – Spark – 环境 – 本地环境local – 补充说明.avi‘

09 – Spark – 环境 – 独立部署环境Standalone.avi

10 – Spark – 环境 – 独立部署环境Standalone – 历史服务.avi

11 – Spark – 环境 – 独立部署环境Standalone – HA高可用.avi

12 – Spark – 环境 – Yarn环境.avi

13 – Spark – 环境 – Yarn环境 – 历史服务(未演示).avi

14 – Spark – 环境 – 其他环境 – k8s & Mesos & Windows.avi

15 – Spark – 环境 – 部署方式对比 & 端口号总结.avi

16 – Spark – 核心对象.avi

17 – Spark – 核心概念.avi

18 – Spark – 基本提交流程.avi

19 – Spark – RDD – 介绍.avi

20 – Spark – RDD – IO的执行原理.avi

21 – Spark – RDD – RDD的执行原理.avi

22 – Spark – RDD – RDD的核心属性.avi

23 – Spark – RDD – RDD在计算流程中的位置.avi

24 – Spark – RDD – 创建RDD – 内存.avi

25 – Spark – RDD – 分区计算的原理.avi

26 – Spark – RDD – 创建RDD – File.avi

27 – Spark – RDD – 创建RDD – 内存创建的分区数量.avi

501 – Spark – 课程内容回顾.avi5 ?; J& }) w8 h  l) E

502 – Spark – 同学问题解答 – windows环境的文件路径问题.avi

day03% @0 q& M( p5 [& Q! O2 A

28 – Spark – RDD – RDD概念梳理.avi

29 – Spark – RDD – RDD原理说明.avi

30 – Spark – RDD – makeRDD的分区的设置.avi

31 – Spark – RDD – makeRDD分区数据存储的演示.avi

32 – Spark – RDD – makeRDD分区数据存储源码走读.avi

33 – Spark – RDD – textfile分区数据存储的演示.avi

34 – Spark – RDD – textfile分区数据存储的原理说明.avi

35 – Spark – RDD – textfile分区数据存储的原理说明 – 1.avi

36 – Spark – RDD – textfile分区数据存储的原理说明 – 2.avi

37 – Spark – RDD – textfile分区数据存储的原理说明 – 多文件.avi

38 – Spark – RDD – 算子 – 介绍.avi

39 – Spark – RDD – 转换算子 – map.avi

40 – Spark – RDD – 转换算子 – map实现原理.avi

41 – Spark – RDD – 转换算子 – map实现原理 – 1.avi

42 – Spark – RDD – 转换算子 – map – 小练习.avi

43 – Spark – RDD – 转换算子 – mapPartitions.avi

44 – Spark – RDD – 转换算子 – mapPartitions – 小练习.avi

45 – Spark – RDD – 转换算子 – mapPartitions – 和map算子的区别.avi

46 – Spark – RDD – 转换算子 – mapPartitionsWithIndex.avi

47 – Spark – RDD – 转换算子 – flatMap.avi

48 – Spark – RDD – 转换算子 – glom.avi

49 – Spark – RDD – 转换算子 – groupBy.avi

50 – Spark – RDD – 转换算子 – filter.avi

503 – Spark – 课程内容回顾 – 架构和原理.avi

504 – Spark – 直播间问题答疑 – RDD.avi

day04

51 – Spark – RDD – 转换算子 – 小练习.avi

52 – Spark – RDD – 转换算子 – sample.avi

53 – Spark – RDD – 转换算子 – distinct.avi

54 – Spark – RDD – 转换算子 – coalesce.avi

55 – Spark – RDD – 转换算子 – coalesce & repartition 的区别.avi

55 – Spark – RDD – 转换算子 – repartition.avi

56 – Spark – RDD – 转换算子 – sortBy.avi

57 – Spark – RDD – 转换算子 – 双value的数据操作.avi

58 – Spark – RDD – 转换算子 – 双value的数据操作 – 多场景演示.avi

59 – Spark – RDD – 转换算子 – 双value的数据操作 – 问题解答.avi

60 – Spark – RDD – 转换算子 – K-V的数据操作.avi

61 – Spark – RDD – 转换算子 – partitionBy.avi

62 – Spark – RDD – 转换算子 – 自定义分区器.avi6

63 – Spark – RDD – 转换算子 – partitionBy问题解答.avi

64 – Spark – RDD – 转换算子 – reduceByKey.avi

65 – Spark – RDD – 转换算子 – groupByKey.avi

66 – Spark – RDD – 转换算子 – groupByKey实现原理.avi

67 – Spark – RDD – 转换算子 – groupByKey & reduceByKey的区别.avi

68 – Spark – RDD – 转换算子 – aggregateByKey.avi

69 – Spark – RDD – 转换算子 – aggregateByKey 演示和说明.avi

70 – Spark – RDD – 转换算子 – foldByKey.avi

71 – Spark – RDD – 转换算子 – combineByKey.avi

72 – Spark – RDD – 转换算子 – combineByKey 演示&说明.avi

505 – Spark – 课程内容回顾.avi

day05” \3 Y1 x! b; l; J

73 – Spark – RDD – 转换算子 – pipe.avi4 u” X- r: x% O- H9 ]

74 – Spark – RDD – 转换算子 – 去重思路.avi

75 – Spark – RDD – 转换算子 – 聚合算子的区别.avi

76 – Spark – RDD – 转换算子 – sortByKey.avi

77 – Spark – RDD – 转换算子 – sortByKey – 自定义key.avi

78 – Spark – RDD – 转换算子 – join.avi

79 – Spark – RDD – 转换算子 – leftOuterJoin & cogroup.avi

80 – Spark – RDD – 案例实操 – 需求分析.avi

81 – Spark – RDD – 案例实操 – 功能实现.avi

82 – Spark – RDD – 行动算子 – 介绍.avi

83 – Spark – RDD – 行动算子 – 演示.avi

84 – Spark – RDD – 行动算子 – 数据保存.avi

85 – Spark – RDD – 行动算子 – 乱码问题.avi

86 – Spark – RDD – 行动算子 – foreach.avi

87 – Spark – RDD – 行动算子 – 序列化.avi

88 – Spark – RDD – 行动算子 – 序列化 – 演示.avi

89 – Spark – RDD – 行动算子 – 序列化 – Kryo框架.avi

90 – Spark – RDD – 依赖关系 – 介绍.avi

91 – Spark – RDD – 依赖关系 – 宽依赖 & 窄依赖.avi

92 – Spark – RDD – 依赖关系 – 宽依赖 & 窄依赖 图形演示.avi

93 – Spark – RDD – 阶段的划分.avi

94 – Spark – RDD – 阶段的划分 – 源码和图形演示.avi

506 – Spark – 课程内容回顾 – KV算子.avi

day06% z6 F3 V) C: I) g& |  [0 X

95 – Spark – RDD – 任务的划分 – 源码.avi

96 – Spark – RDD – 持久化 – 缓存.avi

97 – Spark – RDD – 持久化 – 缓存.avi

98 – Spark – RDD – 持久化 – 检查点.avi

99 – Spark – RDD – 持久化 – 检查点 & cache的关系.avi

100 – Spark – RDD – 数据的保存和读取.avi

101 – Spark – 累加器 – 介绍.avi

102 – Spark – 累加器 – 原理和演示.avi

103 – Spark – 累加器 – 自定义累加器的创建和使用 – 1.avi

104 – Spark – 累加器 – 自定义累加器的创建和使用 – 2.avi

105 – Spark – 累加器 – 方法调用的时机.avi

106 – Spark – 广播变量 – 介绍.avi

107 – Spark – 广播变量 – 原理说明 & 演示.avi

108 – Spark – 案例实操 – 数据说明.avi

109 – Spark – 案例实操 – 数据说明 – 1.avi

110 – Spark – 案例实操 – 框架 – 封装.avi

111 – Spark – 案例实操 – 框架 – 封装 – 1.avi

507 – Spark – 问题解答.avi% e3 w/ H, U* c: Q+ g

508 – Spark – 11种不同算子实现的wordCount.avi

509 – Spark – 课程内容回顾 – 阶段划分.avi

day07i/ y |1 g& ?: T1 C8 z& ~7 Z

112 – Spark – 问题答疑 – 1.avi

113 – Spark – 问题答疑 – 2.avi

114 – Spark – 案例实操 – 框架 – 封装 – 2.avi

115 – Spark – 案例实操 – 框架 – ThreadLocal.avi

116 – Spark – 案例实操 – 框架 – 改善.avi

117 – Spark – 案例实操 – 需求一 – 需求分析&设计.avi

118 – Spark – 案例实操 – 需求一 – 功能实现 – 1.avi

119 – Spark – 案例实操 – 需求一 – 功能实现 – 2.avi

120 – Spark – 案例实操 – 需求一 – 功能优化 – 1.avif

121 – Spark – 案例实操 – 需求一 – 功能优化 – 2.avi

122 – Spark – 案例实操 – 需求一 – 功能优化 – 3.avi/ L. Z” P! \- |, q

123 – Spark – 案例实操 – 需求一 – 功能优化 – 4 – 累加器的创建.avi

124 – Spark – 案例实操 – 需求一 – 功能优化 – 4 – 累加器的使用.avi

125 – Spark – 案例实操 – 需求二 – 需求分析 & 设计.avi

126 – Spark – 案例实操 – 需求二 – 功能实现.avi

127 – Spark – 案例实操 – 需求二 – 错误调试.avi

128 – Spark – 案例实操 – 需求二 – 优化.av

510 – Spark – 课程内容回顾 – 累加器.avi

day08

129 – Spark – 案例实操 – 需求三 – 介绍.avi

130 – Spark – 案例实操 – 需求三 – 需求分析.avi

131 – Spark – 案例实操 – 需求三 – 功能实现 – 计算分母.avi

132 – Spark – 案例实操 – 需求三 – 功能实现 – 计算分子.avi

133 – Spark – 案例实操 – 需求三 – 功能实现 – 计算单跳转换率.avi‘

134 – Spark – 案例实操 – 需求三 – 功能补充.avi

135 – Spark – SQL – 介绍.avi

136 – Spark – SQL – 介绍补充.avi

137 – Spark – SQL – DataFrame.avi

138 – Spark – SQL – DataSet.avi, ~- G5 Y8 }/ q$ [

139 – Spark – SQL – 基本API演示.avi

140 – Spark – SQL – 基本API演示 – SQL.avi

141 – Spark – SQL – 基本API演示 – DSL语法.avi

142 – Spark – SQL – DataFrame & RDD转换.avi

143 – Spark – SQL – DataSet & RDD转换.avi

144 – Spark – SQL – DataSet & DataFrame转换.avi

145 – Spark – SQL – IDEA开发SparkSQL程序 – 创建环境对象.avi

146 – Spark – SQL – IDEA开发SparkSQL程序 – 演示基本操作.avi

day097 {1 A0 @/ j’ X5 L/ {9 _

147 – Spark – SQL – IDEA开发SparkSQL程序 – 基本操作回顾.avi

148 – Spark – SQL – UDF.avi

149 – Spark – SQL – UDAF – 方法重写 – 1.avi

150 – Spark – SQL – UDAF – 方法重写 – 2.avi

151 – Spark – SQL – UDAF – 原理的解释.avi4

152 – Spark – SQL – UDAF – 强类型的UDAF.avi

153 – Spark – SQL – 通用的读取功能.avi

154 – Spark – SQL – 通用的保存功能.avi* b  T0 e6 \# Y2 u* L: a

155 – Spark – SQL – 通用的保存&读取功能说明.avi

156 – Spark – SQL – CSV文件的读取.avi

157 – Spark – SQL – Mysql数据的读取&保存.avi

158 – Spark – SQL – 内置Hive的访问.avi

159 – Spark – SQL – 外置Hive的访问.avi

160 – Spark – SQL – 案例实操 – 模拟数据的生成.avi

161 – Spark – SQL – 案例实操 – SQL的编写和测试.avi

512 – Spark – 考试题目 – 解析.avi1 Z+ ~/ i. k! q

513 – Spark – 课程内容回顾 – SparkSQL.avi

514 – Spark – 课程内容回顾 – SparkSQL – UDAF.avi

day10

162 – Spark – SQL – 案例实操 – 聚合函数的编写 – 1.avi

163 – Spark – SQL – 案例实操 – 问题解释.avi

164 – Spark – SQL – 案例实操 – 问题解释.avi

165 – Spark – Streaming – 介绍.avi

166 – Spark – Streaming – 概念和原理.avi

167 – Spark – Streaming – wordcount演示.avi

168 – Spark – Streaming – wordcount问题说明.avi

169 – Spark – Streaming – wordcount解析.avi

170 – Spark – Streaming – 队列采集数据.av

171 – Spark – Streaming -目录采集数据.avi

172 – Spark – Streaming -自定义数据采集器.avi

173 – Spark – Streaming – Kafka数据源.avi

174 – Spark – Streaming – transform.avi

175 – Spark – Streaming – join.avi

176 – Spark – Streaming – 有状态的计算updateStateByKey.avi

177 – Spark – Streaming – 有状态的计算window.av

515 – Spark – 课程内容回顾 – SparkSQL.avi:

516 – Spark – 课程内容回顾 – SparkSQL – 案例实操.avi

day11

178 – Spark – Streaming – 有状态的计算reduceByKeyAndWindow.avi

179 – Spark – Streaming – 输出.avi

180 – Spark – Streaming – 优雅地关闭.avi

181 – Spark – Streaming – 优雅地关闭 – 演示.avi

182 – Spark – Streaming – 优雅地关闭 – 演示补充.avi

183 – Spark – Streaming – 优雅地关闭 – 检查点操作.avi

184 – Spark – Streaming – 案例实操 – 搭建环境.avi

185 – Spark – Streaming – 案例实操 – 生成模拟数据 – 1.avi

186 – Spark – Streaming – 案例实操 – kafka数据读取和发送的封装.av

187 – Spark – Streaming – 案例实操 – 测试数据的生产和消费.avi

188 – Spark – Streaming – 案例实操 – 生产数据 – 梳理 – 1.avi

189 – Spark – Streaming – 案例实操 – 生产数据 – 梳理 – 2.avi

190 – Spark – Streaming – 案例实操 – 生产数据 – 梳理 – 3.avi

191 – Spark – Streaming – 案例实操 – 需求一 – 需要介绍.avi

192 – Spark – Streaming – 案例实操 – 需求一 – 需求分析.avi

193 – Spark – Streaming – 案例实操 – 需求一 – 功能实现 – 1.avi

194 – Spark – Streaming – 案例实操 – 需求一 – 功能实现 – 2.avi

195 – Spark – Streaming – 案例实操 – 需求一 – 功能实现 – 3.avi

196 – Spark – Streaming – 案例实操 – 需求一 – 流程梳理.avi

197 – Spark – Streaming – 案例实操 – 需求一 – 扩展.avi

517 – Spark – 课程内容回顾 – SparkStreaming.avi

day12

198 – Spark – Streaming – 案例实操 – 需求二 – 功能实现.avi

199 – Spark – Streaming – 案例实操 – 需求三 – 需求分析.avi

200 – Spark – Streaming – 案例实操 – 需求三 – 功能实现 – 1.avi

201 – Spark – Streaming – 案例实操 – 需求三 – 功能实现 – 2.avi

202 – Spark – Streaming – 案例实操 – 需求三 – 数据生成.avi

203 – Spark – 内核 – 知识点梳理.avi

204 – Spark – 内核 – 知识点梳理 – 源码解析 – 提交参数的封装.avi

205 – Spark – 内核 – 知识点梳理 – 源码解析 – 反射创建对象执行.avi

206 – Spark – 内核 – 知识点梳理 – 源码解析 – 向Yarn发送指令启动AM.avi

207 – Spark – 内核 – 知识点梳理 – 源码解析 – AM中启动Driver线程.avi4

208 – Spark – 内核 – 知识点梳理 – 源码解析 – AM申请资源并对资源进行匹配.avi

209 – Spark – 内核 – 知识点梳理 – 源码解析 – AM向NM请求容器,启动Executor.avi

210 – Spark – 内核 – 知识点梳理 – 源码解析 – Executor反向注册后创建计算对象.avi

211 – Spark – 内核 – 知识点梳理 – 源码解析 – Driver向Executor发送Task并执行.avi

212 – Spark – 内核 – 知识点梳理 – 源码解析 – 问题解答.avi

213 – Spark – 内核 – 架构梳理 – Yarna – Cluster.avi

214 – Spark – 内核 – 通信 – 原理介绍.avi

215 – Spark – 内核 – 通信 – 源码解析.avi

216 – Spark – 内核 – 通信 – 课件梳理.avi

518 – Spark – 课程内容回顾 – SparkStreaming – 案例实操.avi

2.资料.zip

 

 

1、本站所有文档、视频、书籍等资料均由网友分享,本站只负责收集不承担任何技术及版权问题。
2、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除下载链接并致以最深的歉意。
3、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责。
4、一经注册为本站会员,一律视为同意网站规定,本站管理员及版主有权禁止违规用户。
5、管理员有权不事先通知发贴者而删除本文。

课程网 » 2020年最新尚谷大数据技术之Spark