掉线时限参数设置| 学习笔记

简介: 快速学习掉线时限参数设置

开发者学堂课程【Hadoop 分布式文件系统 HDFS掉线时限参数设置】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1466


掉线时限参数设置


目录:

一、掉线时限参数设置

二、参数举例

 

一、掉线时限参数设置

1、DataNode 进程死亡或者网络故障造成 DataNode 无法与 NameNode 通信

2、NameNode 不会立即把该节点判定为死亡,要经过一段时间,这段时间暂称作超时时长。 3HDFS 默认的超时时长为10分钟+30秒。

4、如果定义超时时间为 TimeOut,则超时时长的计算公式为:

TimeOut=2*dfsnamenodeheartbeat.recheckinterval+10*dfs.heartbeatinterval。

而默认的dfs.namenodeheatbeatrecheck-interval大小为5分钟,dfsheartbeatinterval默认为3秒。

图片1.png

参数举例

需要注意的是 hdfs-site.xml 配置文件中的 heartbeat.recheck.interval 的单位为毫秒,dfs.heartbeat.interval 的单位为秒。

图片2.png

在系统配置里面查找到的是

图片3.png

也就是说300000毫秒进化为分钟就是5分钟

图片4.png

在配置系统里面找到的是

图片5.png

相关文章
|
存储 SQL 数据库
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
556 0
解决、鼠标间歇性、自动断开、又重连(有图)
解决、鼠标间歇性、自动断开、又重连(有图)
359 0
解决、鼠标间歇性、自动断开、又重连(有图)
|
Java Android开发
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
498 0
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
「WGCLOUD」指令下发后需要多长时间执行完成
「WGCLOUD」的指令下发后需要多长时间执行完成
「WGCLOUD」指令下发后需要多长时间执行完成
|
存储 NoSQL
3.10.0-693.5.2内核nfs客户端租约过期挂死问题分析
## 现象 1. 边缘存储两个节点fileserver,glance挂载物理机上的挂载点均出现挂住无法访问 2. 从客户端抓包看,客户端内核间隔5s向服务端发送renew租约请求,服务端返回NFS4ERR_EXPIRED,即租约过期错误,从抓包现象看客户端一直向服务端发送相同的clientid renew请求,服务端一直返回租约过期错误,导致挂载点无法恢复 ![](https://ata2-img
1639 1
3.10.0-693.5.2内核nfs客户端租约过期挂死问题分析
|
存储 JSON 运维
临近年关,发生两起磁盘占满引发的服务下线故障
一口气说两个因为磁盘空间不足引发的应用故障。
临近年关,发生两起磁盘占满引发的服务下线故障
心跳 —— 超时机制分析
在C/S模式中,有时我们会长时间保持一个连接,以避免频繁地建立连接,但同时,一般会有一个超时时间,在这个时间内没发起任何请求的连接会被断开,以减少负载,节约资源。并且该机制一般都是在服务端实现,因为client强制关闭或意外断开连接,server端在此刻是感知不到的,如果放到client端实现,在上述情况下,该超时机制就失效了。本来这问题很普通,不太值得一提,但最近在项目中看到了该机制的一种糟糕的实现,故在此深入分析一下。
898 0
心跳 —— 超时机制分析
|
域名解析 SQL Oracle
监听连接时间过长如何解决
当我们用PL/SQL Developer或用SQLlplus (sqlplus user/password@orcl)连接数据库的时候非常缓慢,连接有时需要30秒 左右才能正常登录到数据库,连接之后数据库一切正常。 为了能更好的解决上面的问题,我们需要有如下的一些Oracle的网络基础知识,我们一起来讨论!
监听连接时间过长如何解决
|
SQL 容灾 关系型数据库
一次DTS同步延时过高的排错过程
业务场景: 秒级数据同步要求的容灾场景,通过阿里云数据库同步工具DTS实时将阿里云上RDS的数据实时同步至自建MySQL数据库故障现象: DTS同步延时高达2小时,造成主备数据不一致,无法满足业务的容灾需求排查经过: 首先,联系阿里云DTS后台,后台同学反馈,目标数据库RT(响应时间)过高。
1591 0
一次DTS同步延时过高的排错过程