资讯

精准传达 • 有效沟通

从品牌网站建设到网络营销策划,从策略到执行的一站式服务

HDFS中出现java.io.IOException:Mkdirsfailedtocreate错误怎么办

这篇文章主要介绍HDFS中出现java.io.IOException: Mkdirs failed to create错误怎么办 ,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

创新互联主要从事网站设计、成都网站制作、网页设计、企业做网站、公司建网站等业务。立足成都服务龙城,十余年网站建设经验,价格优惠、服务专业,欢迎来电咨询建站服务:13518219792

在写spark代码的时候,在将rdd的结果保存到hdfs上时,

rdd.saveAsTextFile("/data/spark")

出现了

java.io.IOException: Mkdirs failed to create

这个错误,个人一直认为这样就应该写到hdfs上了,但是一执行就报错,最后才发现,这种写法是写到本地了,如果要写到hdfs上要写上全路径

rdd.saveAsTextFile("hdfs://192.168.23.21:9000/data/spark")

这样就行了,总结一下

saveTextFile是将RDD保存到文件,本地模式时保存在本地文件,集群模式指如果在Hadoop基础上则保存在HDFS上,由于我用的是本地模式所以会报以上的错误,如果用的是集群就可以直接那样写了。

以上是“HDFS中出现java.io.IOException: Mkdirs failed to create错误怎么办 ”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!


当前文章:HDFS中出现java.io.IOException:Mkdirsfailedtocreate错误怎么办
文章转载:http://cdkjz.cn/article/gjhdis.html
多年建站经验

多一份参考,总有益处

联系快上网,免费获得专属《策划方案》及报价

咨询相关问题或预约面谈,可以通过以下方式与我们联系

大客户专线   成都:13518219792   座机:028-86922220