概述
搭建完Hadoop集群后，需要对HDFS读写性能和MR计算能力测试。测试jar包在hadoop的share文件夹下。
集群总吞吐量=带宽集群节点个数/副本数
如:100m/s * 10台/3 = 333m/s
如:2000m/s14台/3 = 9333m/s
注意:如果测试数据在本地，副本数-1.因为这个副本不占用集群吞吐量。如果数据在集群外，向该集群上传，需要占用带宽，就不用减1.
查看带宽linux命令
1.查看服务器网络端口
#ifconfig
2.查看带宽大小：sudo ethtool xxx
#sudo ethtool ens160
带宽为万兆
最后
以上就是不安发卡为你收集整理的hadoop基准测试的全部内容，希望文章能够帮你解决hadoop基准测试所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复