懵懂铅笔

文章
4
资源
0
加入时间
3年1月8天

11. Spark内存管理1. 静态内存管理分布图2. 统一内存管理分布图3. reduce 中OOM如何处理?

描述:Spark执行应用程序时,Spark集群会启动Driver和Executor两种JVM进程,Driver负责创建SparkContext上下文,提交任务,task的分发等。Executor负责task的计算任务,并将结果返回给Driver。同时需要为需要持久化的RDD提供储存。Driver端的内存管理比较简单,这里所说的Spark内存管理针对Executor端的内存管理。Spark内存管...

Groovy轻松入门——通过与Java的比较,迅速掌握Groovy

转自 :Groovy轻松入门——通过与Java的比较,迅速掌握Groovy (更新于2008.10.18)在前几篇文章中,我已经向大家介绍了Groovy是什么,学习Groovy的重要性等内容,还不了解Groovy的朋友不妨去看看我Blog中的Groovy分类。下面我将通过Groovy与Java的比较,解开Groovy的神秘面纱。Ready? Start!注意:本教程是针对Groovy最新...