机灵嚓茶

文章
4
资源
0
加入时间
2年10月17天

第二章 Spark入门案例2.1 Spark中WordCount的执行流程

Spark的WordCount示例WordCount中各个对象和方法的主要作用SparkConf创建SparkConf对象,设置Spark应用的配置信息。setAppName() 设置Spark应用程序在运行中的名字;如果是集群运行,就可以在监控页面直观看到我们运行的job任务。setMaster() 设置运行模式、是本地运行,设置为local即可;如果是集群运行,就可以设置程序要连接的Spark集群的master节点的url(localhost:7077)。