HDFS Datanode 节点间均衡(加节点)

Desc: 适用于集群版本加机器后的 hdfs 数据均衡,比较简单只需要在CDH控制台上操作即可
1.hdfs配置中搜索"threshold",默认值是10,改成 2 或者 1
在这里插入图片描述
2.如下图点击 重新均衡 即可,如果没有此选项,则说明没有 balancer 角色,在界面上添加该实例角色后即可
在这里插入图片描述
3.默认速度比较慢,条件允许时可以临时调整下迁移速度,下面示例为调整至 100MB/s

sudo su - hdfs
hdfs dfsadmin -setBalancerBandwidth 104857600

4.可以从datanode的日志中过滤下 bandwidth ,可以看到带宽的变化

发布了23 篇原创文章 · 获赞 0 · 访问量 122

猜你喜欢

转载自blog.csdn.net/Abson_Lu/article/details/104521359