开发者学堂课程【Hadoop 分布式文件系统 HDFS:黑名单退役-案例】学习笔记,与课程紧密联系,让用户快速学习知识。
课程地址:https://developer.aliyun.com/learning/course/93/detail/1469
黑名单退役-案例
内容简介:
一、黑名单的设置过程和举例。
一、黑名单的设置过程和举例。
在黑名单上的主机都会被强制退出。
1、在 Name Node 的/opt/module/hadoop-2.7.2/etc/hadoop 目录下创建 dis。Hosls。exclude 文件。
添加如下主机名(要退役的节点)
2、在 Name Node 的 hdfs-sixt.xml 配置文件中增加 dis。Hosls。exclude 属性
配置之后系统就知道要在这独取一个文件,在这个名单上的主机都要退出运行。
3、刷新 Name Node 刷新 ResourceManger
示例:
之后在退出
分发成功之后在去执行
此时显示的是正在退役(正在死亡),此时是正在将自己节点上的数据进行拷贝,拷贝到其他节点上,该节点上的数据越多,死亡的过程越长。
4、检查WEB浏览器,退役节点的状态为 decommission in progerss(退役中),说明数据正在复制到其他节点。
等待退役节点状态为 decommissioned(所有块已经复制完成),停止该节点以及节点资源管理。注意:如果副本数是3,服役节点小于3,是不能退役成功的,需要修改副本数后才能退役。
5、如果数据不均衡,可以用命令来实现集群的再平衡