概述
1、报错 ERROR TaskSchedulerImpl: Lost executor 3 on 172.16.0.24: Unable to create executor due to Unable to register with external shuffle server due to : Failed to connect to /172.16.0.24:7337
在spark-defaults.conf文件中添加：
spark.shuffle.service.enabled
true2、spark-submit后运行程序连接不上子节点
java.net.ConnectException: Connectionrefused
INFOzookeeper.ClientCnxn: Opening socket connection to serverlocalhost/0:0:0:0:0:0:0:1:2181. Will not attempt to authenticate using SASL (unknownerror)
估计是用到了Hbase：
将Hbase目录中conf下hbase-site.xml拷贝到spark的conf目录下
最后
以上就是高贵牛排为你收集整理的【Spark】Spark常见错误的全部内容，希望文章能够帮你解决【Spark】Spark常见错误所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复