HDFS- DataNode磁盘扩缩容
背景:
缩减/增加节点磁盘
方案介绍:
采用hdfs dfsadmin -reconfig 动态刷新配置实现,不停服扩缩容。
注意事项:
请在进行缩容之前,务必了解实际的数据量,并确保磁盘有足够的空间来容纳这些数据。还需要考虑未来的使用需求,要预留一定数量的空间,以适应未来的增长。
执行步骤
前置检查:
- 确定block副本统计正常,无丢块,无under-replicated 块
后台检查:hdfs dfs fsck /
- kde监控页面无严重告警
###所有变更 避开业务高峰期
一、datanode磁盘扩缩容
1、修改配置
例如:/data2/hadoop/hdfs/datanode 目录
2、保存配置