HDFS java.io.IOException: Mkdirs failed to create

57 阅读 0 评论 38 点赞

我是靠谱客的博主苗条御姐，最近开发中收集的这篇文章主要介绍HDFS java.io.IOException: Mkdirs failed to create，觉得挺不错的，现在分享给大家，希望可以做个参考。

为什么80%的码农都做不了架构师？>>>

今天在写spark代码的时候，在将rdd的结果保存到hdfs上时，

rdd.saveAsTextFile("/data/spark")

出现了

java.io.IOException: Mkdirs failed to create

这个错误，个人一直认为这样就应该写到hdfs上了，但是一执行就报错，最后才发现，这种写法是写到本地了，如果要写到hdfs上要写上全路径

rdd.saveAsTextFile("hdfs://192.168.23.21:9000/data/spark")

这样就行了，总结一下

saveTextFile是将RDD保存到文件，本地模式时保存在本地文件，集群模式指如果在Hadoop基础上则保存在HDFS上，由于我用的是本地模式所以会报以上的错误，如果用的是集群就可以直接那样写了。

转载于:https://my.oschina.net/sucre/blog/601644

以上就是苗条御姐为你收集整理的HDFS java.io.IOException: Mkdirs failed to create的全部内容，希望文章能够帮你解决HDFS java.io.IOException: Mkdirs failed to create所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。