从spark 监控UI页面理解Spark计算框架
笔记 / 2018年12月3日

Spark计算框架的元素之间关系: Spark UI监控界面如何观察各元素的状态? Spark的概念非常多, 看懂监控页面才能方便定位性能问题, 下面主要是著名样例 workcount的执行监控结果样例: 1 代表job页面 在里面可以看到当前应用分析出来的所有Job,以及所有的excutors中action的执行时间。 第一部分event timeline展开后,可以看到executor创建的时…