首页 > 其他 > 详细

Hdfs存储负载均衡调整

时间:2021-05-13 20:26:33      阅读:28      评论:0      收藏:0      [点我收藏+]

查看节点hdfs文件负载

查看各节点hdfs文件使用情况:hdfs dfsadmin -report
hdfs dfsadmin -report > balance

cat balance | grep "DFS Used%"
cat balance | grep "Name"

负载均衡

查出上边各个节点使用率,将使用率高的和使用率低的做一个负载均衡
将corehadoop04,corehadoop19,corehadoop20,corehadoop21,corehadoop22,corehadoop23,corehadoop24,corehadoop25节点做个负载均衡
[hdfs@corehadoop04 tools]$ cat hdfs_balance.sh
hdfs dfsadmin -fs hdfs://cluster01:8020 -setBalancerBandwidth 6291456000
hdfs balancer -include corehadoop04,corehadoop19,corehadoop20,corehadoop21,corehadoop22,corehadoop23,corehadoop24,corehadoop25 -threshold 4

Hdfs存储负载均衡调整

原文:https://www.cnblogs.com/whiteY/p/14764687.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!