你将收获

Master 启动原理和源码详解

Worker 启动原理和源码详解

ExecutorBackend 启动原理和源码详解

Executor 中任务的执行

适用人群

所有Spark学习者和从业人员、有分布式计算框架应用经验的人员、高等院校学生

课程介绍

 本课程讲解Spark 3.0.0 集群启动原理和源码详解的内容,包括:Master 启动原理和源码详解: Master 启动的原理详解、 Master 启动的源码详解、 Master HA 双机切换、 Master 的注册机制和状态管理解密; Worker 启动原理和源码详解: Worker 启动的原理流程、 Worker 启动的源码详解; ExecutorBackend 启动原理和源码详解: ExecutorBackend 接口与Executor 的关系、 ExecutorBackend 的不同实现、ExecutorBackend 中的通信、 ExecutorBackend 的异常处理; Executor 中任务的执行: Executor 中任务的加载、Executor 中的任务线程池、 任务执行失败处理、 揭秘TaskRunner; Executor 执行结果的处理方式。           

课程目录