退役旧数据节点 | 学习笔记

简介: 快速学习退役旧数据节点

开发者学堂课程【Hadoop 分布式文件系统 HDFS:退役旧数据节点】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1468


退役旧数据节点


1、添加白名单

添加到白名单的主机节点,都允许访问Name Node,不在白名单的主机节点都会被退出。

配置白名单的步骤:

(1)在 Name Node 的 /opt/module/hadoop-2.7.2/etc/hadoop 目录下创建 dfs.hosts 文件

图片1.png

添加如下主机名称(不添加 hadoop105)

图片2.png

(2)在 Name Node 的 hdfs-site.xml 配置文件中增加 dfs.hosts 属性

图片3.png

(3)配置文件分发

图片4.png

(4)刷新 Name Node

图片5.png

(5)更新 Resource Manager 节点

图片6.png

(6)在 Web 浏览器上查看

示例:图片7.png

在这里面添加的主机都是允许访问集群的,同样的需要注意不允许有空行和空格,因为同样都是被脚本调用。

启用成功之后来到 hdfs.hosts

图片8.png

把配置路径粘贴过来启动成功,不要忘记分发,分发到104上面

图片9.png

下面刷新 Name Node

图片10.png

刷新成功之后再去查看集群

图片11.png

白名单一般是在刚搭建集群的时候允许哪台主机来访问集群。

2、如果数据不均衡,可以用命令式先集群的再平衡

图片12.png

退役一个节点之后需要把节点数据拷贝到别的节点上,这个时候就有可能导致某些节点负载过大。

相关文章
|
存储 SQL 关系型数据库
创建并配置RDS实例
在阿里云上创建RDS实例涉及登录控制台、进入RDS管理页面、创建实例、选择数据库引擎和版本、配置实例规格与存储、设定网络与安全组、设置实例信息、确认订单并支付,最后初始化数据库。操作步骤可能因界面更新或数据库引擎不同略有差异。
614 1
|
存储 Kubernetes 监控
K8S核心组件介绍
K8S核心组件介绍
|
7月前
|
JSON 缓存 并行计算
NVIDIA 实现通义千问 Qwen3 的生产级应用集成和部署
阿里巴巴近期开源了通义千问Qwen3大语言模型(LLM),包含两款混合专家模型(MoE)235B-A22B与30B-A3B,以及六款稠密模型(Dense)从0.6B到32B不等。开发者可基于NVIDIA GPU使用TensorRT-LLM、Ollama、SGLang、vLLM等框架高效部署Qwen3系列模型,实现快速词元生成和生产级应用开发。
|
弹性计算 自然语言处理 测试技术
30分钟私有部署Deepseek-R1和V3,轻松拥有企业专属超大模型
阿里云计算巢推出了基于 ECS镜像、Vllm和Ray集群的超大模型一键部署方案。该方案通过预置标准化环境的ECS镜像,结合自动化云资源编排模板(如Ros模板),将Deepseek-R1和Deepseek-V3的私有化部署流程简化为一键操作。用户无需深入理解底层技术细节,即可在 30分钟内 快速完成模型环境搭建与服务启动,真正实现“开箱即用”的企业级超大模型服务。
|
运维 监控 负载均衡
探索微服务架构下的服务治理:动态服务管理平台深度解析
探索微服务架构下的服务治理:动态服务管理平台深度解析
|
安全 Go 网络安全
什么是 CSP
CSP(Content Security Policy,内容安全策略)是一种用于防止 XSS、数据注入等攻击的安全机制。通过白名单方式,限制网页中可加载的资源,增强网页安全性。
|
运维 监控 安全
云上智能监控:引领未来安防与运维的新纪元
通过智能视频分析技术自动识别违章行为(如闯红灯、超速等)并触发报警机制。同时结合交通流量监测和信号灯控制功能实现交通流量的优化和拥堵缓解。 智能零售监控:在零售行业中云上智能监控可以应用于店铺的客流统计和商品管理。
|
Java Linux 数据安全/隐私保护
Burp Suite的使用(常用模块)
Burp Suite的使用(常用模块)
470 1
|
移动开发 网络协议 安全
HTML5页面被运营商DNS问题及解决方案,app中h5页面源码的获取
HTML5页面被运营商DNS问题及解决方案,app中h5页面源码的获取
349 4
|
运维 Kubernetes Devops
构建高效稳定的云基础设施:DevOps与容器技术的融合
【5月更文挑战第14天】 在当今快速发展的云计算时代,企业和组织面临着不断变化的市场需求和技术挑战。为了保持竞争力,越来越多的企业转向DevOps实践和容器技术来构建高效、灵活且稳定的云基础设施。本文将探讨如何通过整合DevOps文化和容器化技术,实现自动化运维流程,提高部署速度,减少系统故障,并确保可扩展性和高可用性。我们将分析实际案例,展示这种融合如何在现实世界中为企业带来显著的业务价值。
157 0