Spark源码深入解析

Spark源码深入解析

Spark源码深入解析

基于Spark3.3 版本 ,剖析spark框架源码
录制状态:录制中
配置文档:建设中

总时长:46小时

总节数:80

原价 ¥2999

主讲老师:赵星

课程难度:*****

限时优惠 ¥1699

课程目标

从整体架构上厘清spark框架的源码结构,对重点模块进行逐行级别的源码解析.

RDD模块
Task模块
DAGScheduler模块
TaskScheduler模块
BlockManager模块
Submit提交模块

知识点结构

知识面覆盖广,重点关键深入透彻

课程亮点

E·new出品,必属精品

Spark源码深入解析

全程源码带读

本地IDEA导入源码并调通运行,全程通过断点调试逐行解析源码

Spark源码深入解析

重点源码单元测试

针对重点模块开发单元测试,从内到外彻底透析重点模块核心机制

Spark源码深入解析

二次开发重点详解

重点扩展接口用真实场景进行扩展开发,为二次开发提供大量样本素材

课程保障

配套文档

免费升级

技术答疑

交流社群

代码完整

特别服务

章节目录

Spark 基础概念Spark Shuffle机制概要SparkSQL 编程模型
Spark 编程模型Spark Shuffle机制源码深入SparkSQL Dataset详解
Spark RDD属性介绍Spark 并行度机制概要SparkSQL 输入格式详解
Spark 开发环境Spark 并行度机制源码深入SparkSQL 输出格式详解
Spark 入门案例Spark 运行时架构SparkSQL Dataset与RDD转换
Spark RDD转换算子详解Spark 运行时角色精讲SparkSQL sql语法详解
Spark RDD行动算子详解Spark Standalone模式详解SparkSQL tableAPI详解
Spark 广播变量与闭包引用Spark Yarn-Client模式详解SparkSQL 抽样语法
Spark 累加器详解Spark Yarn-Cluster模式详解SparkSQL 数据倾斜调优
Spark 重分区算子Spark 内存管理机制SparkSQL 执行计划详解
Spark RDD原理深入Spark 内存配置进阶SparkSQL 执行计划深入
Spark DAG调度深入Spark 综合案例实战SparkSQL 执行原理源码解析
Spark Task调度核心概念SparkSQL 基础概念SparkSQL 综合实战案例

更多信息

  • Hbase实战到原理深入

    Hbase实战到原理深入

    Hbase实战到原理深入 基于Hbase2.1.2版本 ,理论结合实战 录制状态:已完结配置文档:已完成 总时长:36小时 总节数:12小时 原价 ¥199主讲老师:赵念行 课程难度:***** 限时优惠 ¥99立即订阅课程目标快速理解hbase框架使用场景,熟悉hbase框架的功能和运行原理,熟练运用hbase客户端api开发应用,拥有一定的故障解决能力和调优技能. 全程干货 Hbase核心架构 Hbase存储原理 客户端编程 RowKey设计 LSM树存储结构 Region原理深入知识点结构…

    单项突破 2022-02-12
  • Hadoop实战深入

    Hadoop实战深入

    Hadoop实战深入 基于hadoop3.1.2版本 ,理论实践结合 录制状态:已完结配置文档:已完成 总时长:36小时 总节数:12小时 原价 ¥299主讲老师:赵星 课程难度:***** 限时优惠 ¥199立即订阅课程目标快速理解flink框架使用场景,熟悉flink框架的功能和运行原理,熟练运用flink框架开发实时流式计算程序,拥有一定的故障解决能力和调优技能. 全程干货 HADOOP核心概念 HADOOP核心架构 MAPREDUCE编程精通 HDFS完全掌握 YARN熟练运用 SHUF…

    单项突破 2022-02-12
  • Flink从入门到实战

    Flink从入门到实战

    Flink从入门到精通 基于最新Flink-1.1.1版本 ,java语言讲解 录制状态:已完结配置文档:已完成 总时长:36小时 总节数:12小时 原价 ¥299主讲老师:赵星 课程难度:***** 限时优惠 ¥199立即订阅课程目标快速理解flink框架使用场景,熟悉flink框架的功能和运行原理,熟练运用flink框架开发实时流式计算程序,拥有一定的故障解决能力和调优技能. 全程干货 批处理api 流处理api flinksql编程 table api编程 时间语义体系 状态管理机制知识点…

    单项突破 2022-01-30
  • FLUME从入门到实战深入

    FLUME从入门到实战深入

    Flume从入门到实战深入 基于最新Flume1.9.0版本 ,理论与实战结合 录制状态:已完结配置文档:已完成 总时长:36小时 总节数:12小时 原价 ¥99.9主讲老师:段海涛 课程难度:***** 限时优惠 ¥29.9立即订阅课程目标快速理解Flume框架使用场景,熟悉Flume框架的功能和运行原理,熟练运用Flume部署各类日志汇聚系统,拥有一定的故障解决能力和调优技能. 全程干货 Flume核心架构 Flume三大组件 Flume拦截器 Flume高可用 Flume可靠性 Flume…

    单项突破 2022-01-30
  • SparkSQL入门到深入

    SparkSQL入门到深入

    SparkSQL入门到深入 基于最新Spark3.1.2版本 ,理论与实践结合 录制状态:已完结配置文档:已完成 总时长:36小时 总节数:12小时 原价 ¥99.9主讲老师:段海涛 课程难度:***** 限时优惠 ¥29.9立即订阅课程目标快速理解sparksql框架使用场景,熟悉sparksql框架的功能和运行原理,熟练运用sparksql框架开发数据批处理程序,拥有一定的故障解决能力和调优技能. 全程干货 sparksql核心架构 sparksql核心原理 sparksql编程模型 spa…

    单项突破 2022-01-30
  • clickhouse应用实践和原理

    clickhouse应用实践和原理

    Clickhouse应用实践和原理 基于最新22.1版本 ,原理实践结合 录制状态:已完结配置文档:已完成 总时长:36小时 总节数:12小时 原价 ¥99.9主讲老师:赵念行 课程难度:***** 限时优惠 ¥69.9立即订阅课程目标快速理解clickhosue库使用场景,熟悉clickhouse的功能和运行原理,熟练运用clickhouse开发应用,拥有一定的故障解决能力和调优技能. 全程干货 clickhouse核心架构 clickhouse核心原理 clickhouse存储引擎 clic…

    单项突破 2022-01-30

联系我们

19910713760

在线咨询:qq号: 83544844

邮件:19910713760@qq.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信