清新网络

文章
2
资源
0
加入时间
2年10月24天

Spark调优

1、开发Spark项目的经验准则   (1)尽量少生成RDD;   (2)尽量少对RDD进行算子操作,如果有可能,尽量在一个算子里面实现多个功能;   (3)尽量少使用发生Shuffle操作的算子,如GroupByKey、ReduceBy...