兴奋硬币

文章
3
资源
0
加入时间
4年2月16天

spark作业调度原理

概述         spark有多种方式调度各个计算所需的资源.         首先,每个application(即sparkContext实例)有一组独立的Executor进程。各种cluster manager(yarn Resource manager,standalone master等等)为application间的调度提供自己的方式。         其次,一个applicatio...