犹豫黑裤

文章
4
资源
0
加入时间
2年10月21天

Spark 内存架构

作者本人经常在StackOverflow上回答一个关系Spark架构的问题,发现整个互联网都没有一篇文章能对Spark总体架构进行很好的描述,作者可怜我们这些菜鸟,写了这篇文章,太感动了。本文读者需要一定的Spark的基础知识,至少了解Spark的RDD和DAG。上图引入了很多术语:"Executor","Task","Cache","Worker Node"等等,当我开始学习