Spark源码深入解析

Spark源码深入解析

Spark源码深入解析

基于Spark3.1.4版本 ,剖析spark框架源码
录制状态:已完结
配置文档:已完成

总时长:36小时

总节数:12小时

原价 ¥299

主讲老师:赵星

课程难度:*****

限时优惠 ¥199

课程目标

从整体架构上厘清spark框架的源码结构,对重点模块进行逐行级别的源码解析.

RDD模块
Task模块
DAGScheduler模块
TaskScheduler模块
BlockManager模块
Submit提交模块

知识点结构

知识面覆盖广,重点关键深入透彻

课程亮点

E·new出品,必属精品

Spark源码深入解析

全程源码带读

本地IDEA导入源码并调通运行,全程通过断点调试逐行解析源码

Spark源码深入解析

重点源码单元测试

针对重点模块开发单元测试,从内到外彻底透析重点模块核心机制

Spark源码深入解析

二次开发重点详解

重点扩展接口用真实场景进行扩展开发,为二次开发提供大量样本素材

课程保障

配套文档

免费升级

技术答疑

交流社群

代码完整

特别服务

章节目录

Spark 基础概念Spark Shuffle机制概要SparkSQL 编程模型
Spark 编程模型Spark Shuffle机制源码深入SparkSQL Dataset详解
Spark RDD属性介绍Spark 并行度机制概要SparkSQL 输入格式详解
Spark 开发环境Spark 并行度机制源码深入SparkSQL 输出格式详解
Spark 入门案例Spark 运行时架构SparkSQL Dataset与RDD转换
Spark RDD转换算子详解Spark 运行时角色精讲SparkSQL sql语法详解
Spark RDD行动算子详解Spark Standalone模式详解SparkSQL tableAPI详解
Spark 广播变量与闭包引用Spark Yarn-Client模式详解SparkSQL 抽样语法
Spark 累加器详解Spark Yarn-Cluster模式详解SparkSQL 数据倾斜调优
Spark 重分区算子Spark 内存管理机制SparkSQL 执行计划详解
Spark RDD原理深入Spark 内存配置进阶SparkSQL 执行计划深入
Spark DAG调度深入Spark 综合案例实战SparkSQL 执行原理源码解析
Spark Task调度核心概念SparkSQL 基础概念SparkSQL 综合实战案例

更多信息

联系我们

19910713760

在线咨询:qq号: 83544844

邮件:19910713760@qq.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信