spark课程内容
课程内容介绍
spark第一部分
01.spark介绍.avi
02.spark实现wordcount.avi
03.spark实现wordcount过滤指定字符.avi
04.在idea下开发scala的spark程序.avi
05.idea下java版wordcount.avi
spark第二部分
01.Spark RDD介绍.avi
02.spark笔记.txt
02.搭建spark standaone模式集群.avi
03.spark进程管理命令.avi
04.spark独立模式整合hadoop HA并实现hdfs文件加载计算.avi
05.spark 提交作业.avi
06.spark并行计算打印结果考察.avi
07.spark RDD介绍-RDD变换.avi
08.spark mapPartitions.avi
09.mapPartitionsWithIndex.avi
10.sample.avi
11.union-intersection-distinct.avi
12.groupByKey.avi
13.计算班级的统计分数.avi
14.aggregateByKey.avi
15.sortByKey.avi
16.sortBy-groupBy一般性方法.avi
17.join.avi
18.cogroup协分组.avi
19.笛卡尔积连接.avi
spark第三部分
01.pipe.avi
02.减少分区和再分区.avi
03.再分区并分区内排序.avi
04.action-reduce-take-first-count.avi
05.action-保存成文本和seq文件.avi
06.action-countBykey-saveSeq.avi
07.sparkcontext-作业启动-master模式-并发度.avi
08.DAG调度器-stage阶段分析.avi
09.宽依赖-窄依赖.avi
10.DAG调度器-task调度器.avi
11.ActiveJob-Stage-Task.avi
12.SparkJob提交流程分析-1.avi
13.SparkJob提交流程分析-2.avi
14.SparkJob提交流程分析-3.avi
15.SparkJob提交流程分析-4.avi
16.SparkJob提交流程分析-5.avi
spark第四部分
01.spark job提交回顾-1.avi
02.spark job提交回顾-2-inbox创建过程.avi
03.spark job提交回顾-3-事件处理过程.avi
04.spark job提交回顾-4-总结.avi
05.RDD持久化.avi
06.RDD持久化-disk.avi
07.RDD持久化-测试map-flatMap.avi
08.完全分布式下持久化操作.avi
09.累加器.avi
10.广播变量.avi
11.百度外卖标签生成程序.avi
12.百度外卖标签生成程序2.avi
13.百度外卖标签生成程序3-商家结果全排序.avi
14.spark job的部署模式.avi
15.spark yarn模式.avi
spark第五部分
01.标签生成java版.avi
02.Spark master节点HA配置.avi
03.Spark master节点HA容灾演练.avi
04.Spark SQL演示.avi
05.Spark SQL customer样例演示.avi
06.Spark SQL 常见查询.avi
07.Spark SQL Scala编程.avi
08.Spark SQL DataFrameAPI编程.avi
09.Spark SQL parquet-json-jdbc访问.avi
10.配置spark成为分布式查询引擎-hive整合.avi
11.配置spark成为分布式查询引擎-hive整合-自定义函数有问题.avi
12.Spark SQL ThriftServer客户端 API使用hive-jdbc类库.avi
13.spark的textFile方法源代码分析.avi
spark第六部分
01.Spark stream介绍.avi
02.体验Spark stream计算-文本流.avi
03.体验Spark stream-java版编程流计算.avi
04.DStream-注意事项.avi
05.spark流计算-窗口化计算.avi
06.窗口化操作API.avi
07.spark-streaming-updateStateByKey.avi
08.spark-streaming-updateStateByKey-2.avi
09.spark-streaming-检查点-实验.avi
10.spark-streaming-kafka系统集成.avi
11.Spark SQL集成hive UDF函数.avi
12.SparkSQL集成hiveUDF.avi