大数据Spark集群架构与源码核心技术 非常稀有的Spark源码核心解读课程 Spark视频教程



===============课程目录===============
(1)\01.Scala语言环境安装、Scala的基本语法；目录中文件数:14个
├─10、映射-1.mp4
├─11、元组-1.mp4
├─12、集合之seq-1.mp4
├─13、集合之set-1.mp4
├─14、集合之map-1.mp4
├─1、认识scala-1.mp4
├─2、安装开发环境-1.mp4
├─3、scala Shell、用idea创建maven项目-1.mp4
├─4、配置maven本地仓库、导入切换项目等其它配置-1.mp4
├─5、变量的声明-1.mp4
├─6、scala的7种值类型和条件表达式-1.mp4
├─7、for循环-1.mp4
├─8、方法和函数的声明以及方法转换成函数-1.mp4
├─9、数组-1.mp4
(2)\02.常用方法练习；目录中文件数:7个
├─1、大数据教程：1、lazy关键字-1.mp4
├─2、函数式编程练习之常用方法-1.mp4
├─3、函数式编程之reduce-1.mp4
├─4、函数式编程之fold-1.mp4
├─5、函数式编程之aggregate-1.mp4
├─6、函数式编程之交并差集-1.mp4
├─7、scala实现wordcount-1.mp4
(3)\03.面向对象、模式匹配；目录中文件数:12个
├─01、创建类、属性-1.mp4
├─02、构造器、辅助构造器-1.mp4
├─03、单例对象-1.mp4
├─04、伴生对象-1.mp4
├─05、apply和unapply方法-1.mp4
├─06、private关键字-1.mp4
├─07、特质、抽象类、继承、重写、实现等-1.mp4
├─08、模式匹配之匹配字符串-1.mp4
├─09、模式匹配之匹配类型-1.mp4
├─10、模式匹配之匹配数组、元组、集合-1.mp4
├─11、模式匹配之样例类-1.mp4
├─12、模式匹配之偏函数-1.mp4
(4)\04.Actor、柯里化、隐式转换；目录中文件数:10个
├─01、作为值的函数-1.mp4
├─02、柯里化概念及声明方式-1.mp4
├─03、柯里化练习-1.mp4
├─04、隐式转换和隐式参数-1.mp4
├─05、隐式转换练习1-1.mp4
├─06、隐式转换练习2-1.mp4
├─07、泛型-1.mp4
├─08、upperbound-1.mp4
├─09、viewbound-1.mp4
├─10、contextbound-1.mp4
(5)\06.Spark集群安装、Spark任务提交、Spark实现WordCount并上传任务；目录中文件数:5个
├─1、spark简介-1.mp4
├─2、spark集群搭建、启动-1.mp4
├─3、spark Shell.启动和提交任务-1.mp4
├─4、spark Wordcount-1.mp4
├─5、上传并执行任务-1.mp4
(6)\07.RDD的基本概念、常用算子练习；目录中文件数:5个
├─1、rdd的概念-1.mp4
├─2、生成rdd的两种方式-1.mp4
├─3、两种类型的算子：transformation和action-1.mp4
├─4、常用算子练习1-1.mp4
├─5、常用算子练习2-1.mp4
(7)\08.案例练习；目录中文件数:4个
├─1、案例需求-求用户在某基站停留的时间-1.mp4
├─2、案例实现-求用户在某基站停留的时间-1.mp4
├─3、案例实现-求用户访问学科的子网页top3-1.mp4
├─4、案例实现-求用户访问学科的子网页top3-chache、自定义分区器-1.mp4
(8)\09.Spark集群启动流程和任务提交流程、案例练习；目录中文件数:4个
├─1、spark集群启动流程-1.mp4
├─2、spark任务提交流程-1.mp4
├─3、wordcount中创建了那些rdd-1.mp4
├─4、案例分析实现-按照ip统计区域访问量-1.mp4
(9)\10.RDD的依赖关系、Stage划分、任务的生成、自定义排序；目录中文件数:4个
├─1、rdd之间的依赖关系-1.mp4
├─2、dag的生成和stage的划分-1.mp4
├─3、webui观察stage划分和任务的生成-1.mp4
├─4、自定义二次排序-1.mp4
(10)\11.Day11 Checkpoint、SparkSQL、Hive-On-Spark；目录中文件数:8个
├─1、checkpoint-1.mp4
├─2、sparksql介绍-1.mp4
├─3、创建dataframe-1.mp4
├─4、dataframe常用操作-dsl风格语法-1.mp4
├─5、dataframe常用操作-sql风格语法-1.mp4
├─6、通过反射推断schema-1.mp4
├─7、通过structtype直接指定schema-1.mp4
├─8、hive-on-spark-1.mp4
(11)\12.SparkStreaming、窗口操作、Spark-On-Yarn；目录中文件数:7个
├─1、sparkstreaming简介-1.mp4
├─2、实例分析：sparkstreaming获取netcat产生的数据进行实时分析-1.mp4
├─3、sparkstreaming实现按批次累加-1.mp4
├─4、窗口函数概念及使用场景-1.mp4
├─5、窗口函数实现wordcount-1.mp4
├─6、spark-on-yarn-1.mp4
├─7、补充：sparkstreaming依赖-1.mp4
(12)\13.源码分析：Spark启动流程、Stage划分、任务生成、任务提交流程；目录中文件数:14个
├─10、executor向driveractor反向注册的过程-1.mp4
├─11、rdd生成和stage划分-1.mp4
├─12、生成任务并提交-1.mp4
├─13、task任务执行流程-1.mp4
├─14、总结-任务生成及提交流程-1.mp4
├─1、关于查看源码的一些介绍-1.mp4
├─2、导入源码-1.mp4
├─3、集群启动流程-master类-1.mp4
├─4、集群启动流程-worker类-1.mp4
├─5、sparksubmit提交任务-1.mp4
├─6、sparkcontext-1.mp4
├─7、创建driveractor和clientactor的过程-1.mp4
├─8、clientactor向master注册任务信息过程-1.mp4
├─9、任务调度的两种方式及master通知worker启动executor的过程-1.mp4
(13)\5.泛型、Akka；目录中文件数:9个
├─1、actor概念-1.mp4
├─2、actor实例之创建actor-1.mp4
├─3、actor实例之消息的接收与发送（异步没有返回值）-1.mp4
├─4、actor实例之消息的接收与发送（同步有返回值）-1.mp4
├─5、actor实例之消息的接收与发送（异步有返回值）-1.mp4
├─6、actor实例之并行编程思想实现单词计数-1.mp4
├─7、akka简介-1.mp4
├─8、akka案例需求分析-1.mp4
├─9、akka案例代码分析-1.mp4