Map/Reduce程序设计

219 阅读 0 评论 145 点赞

我是靠谱客的博主英俊店员，这篇文章主要介绍Map/Reduce程序设计，现在分享给大家，希望可以做个参考。

Map/Reduce程序设计

psftp将JAR包，数据上传至Hadoop主节点，用put命令即可上传

Putty>pscp E:/文件地址/....jar  root@192.x.x.x:/root/
#输入密码即可

执行hdfs dfs -put命令将这些文件上传到指定目录
在这里插入图片描述

在这里插入图片描述
我参考了相关内容，可以解决我出现的错误

在这里插入图片描述
查看最终结果

在这里插入图片描述

(1)执行jar包出现，集群时间不同步,将两个都重启解决问题
(2)出现如图错误，是虚拟内存超了，我去对yarn-site.xml进行修改，修改检查虚拟内存的属性为false解决了问题
在这里插入图片描述

以上就是英俊店员最近收集整理的关于Map/Reduce程序设计的全部内容，更多相关Map/Reduce程序设计内容请搜索靠谱客的其他文章。

本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。