- Spark大数据商业实战三部曲:内核解密|商业案例|性能调优
- 王家林
- 111字
- 2021-03-30 21:55:51
第4章
Spark Driver启动内幕剖析
本章将对Spark Driver启动内幕进行剖析。4.1节对Spark Driver Program进行解析,深度剖析SparkContext;4.2节解析DAGScheduler,讲解DAGScheduler划分Stage及Stage内部Task获取最佳位置的算法;4.3节对底层调度器TaskScheduler进行解析;4.4节解析SchedulerBackend;4.5节整体讲解Spark系统运行内幕机制的循环流程。