你能搞懂connectTimeout和socketTimeout的区别么?

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS PostgreSQL,集群系列 2核4GB
简介: 有时候,由于业务的复杂性,在JVM中拼装一些数据,会造成资源的极大浪费。举个例子,从MySQL中查询出一个List,然后在代码里循环查询数据库,进行一些字段的填充。这种数据组装方式,除了执行效率的问题,往往会有更多的内存占用,对整个JVM计算节点造成了比较大的压力,有时候甚至造成内存溢出。于是,一些比较牛X的开发人员,使用非常复杂的SQL,来把这些耗时的操作,转嫁给数据库。可怜的数据库,成了最后一道屏障。谁让数据库的配置普遍都比较高呢?活该。但是可惜的是,数据库完成这些动作,同样要经历耗时的操作。Java线程等的不耐烦了,就会对用户直接返回超时,懵逼的用户会在这种情况下,再次发起重

有时候,由于业务的复杂性,在JVM中拼装一些数据,会造成资源的极大浪费。举个例子,从MySQL中查询出一个List,然后在代码里循环查询数据库,进行一些字段的填充。

这种数据组装方式,除了执行效率的问题,往往会有更多的内存占用,对整个JVM计算节点造成了比较大的压力,有时候甚至造成内存溢出。于是,一些比较牛X的开发人员,使用非常复杂的SQL,来把这些耗时的操作,转嫁给数据库。

可怜的数据库,成了最后一道屏障。谁让数据库的配置普遍都比较高呢?活该。

但是可惜的是,数据库完成这些动作,同样要经历耗时的操作。Java线程等的不耐烦了,就会对用户直接返回超时,懵逼的用户会在这种情况下,再次发起重试。

要知道,Java端超时,并不代表发起的请求就结束运行了,这在一些高并发的场景中,可怜的数据库会空跑一些耗时的慢查询,计算着一些无人能知的数据。

可怜的数据库。

1、如何设置数据库超时时间
对于mysql数据库,有两个可用的参数:

connectTimeout

默认值:0,单位:毫秒
配置连接超时时间,通过 Socket 对象的 connect(SocketAddress endpoint, int timeout) 方法来配置

socketTimeout

默认值:0,单位:ms
配置socket的超时时间,通过 Socket 对象的 setSoTimeout(int timeout) 方法来配置

示例:

jdbc:mysql://xxx.xx.xxx.xxx:3306/database?connectTimeout=60000&socketTimeout=60000
复制代码
2.超时的意义
当数据库出现宕机或网络异常时,jdbc 驱动的 socket 超时是必须的。由于TPC/IP 的结构,socket 没有办法检测到网络错误,因此应用也不能检测到与数据库之间的连接是否已经断开。如果没有设置 socket 超时,应用程序会一直等待数据库返回结果。为了避免死连接,socket 必须设置超时时间,通过设置超时时间可以防止出现网络错误时一直等待的情况并缩短故障时间。 一般的数据库连接池都会提供链接检查的功能,但对于已经在使用中的连接往往不会再进行检测。

3.配置的测试
3.1、connectTimeout
当设置 connectTimeout=1时,在建立数据库连接时即发生了错误。该值在建立手机游戏买卖数据库连接时有效。

3.2、socketTimeout
构造一个慢查,并设置socketTimeout小于慢查的时间,如:socketTimeout=1000&connectTimeout=1000,慢查执行时间100S。

执行查询时,关键异常日志:

...WARN o.s.jdbc.support.SQLErrorCodesFactory 218 - Error while extracting database name - falling back to empty error codes
org.springframework.jdbc.support.MetaDataAccessException: Error while extracting DatabaseMetaData; nested exception is com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException: No operations allowed after connection closed.

Caused by: com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException: No operations allowed after connection closed.

Caused by: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

The last packet successfully received from the server was 1,029 milliseconds ago. The last packet sent successfully to the server was 1,006 milliseconds ago.

Caused by: java.net.SocketTimeoutException: Read timed out

at java.net.SocketInputStream.socketRead0(Native Method)
at java.net.SocketInputStream.socketRead(SocketInputStream.java:116)
at java.net.SocketInputStream.read(SocketInputStream.java:171)
at java.net.SocketInputStream.read(SocketInputStream.java:141)
at com.mysql.jdbc.util.ReadAheadInputStream.fill(ReadAheadInputStream.java:101)
at com.mysql.jdbc.util.ReadAheadInputStream.readFromUnderlyingStreamIfNecessary(ReadAheadInputStream.java:144)
at com.mysql.jdbc.util.ReadAheadInputStream.read(ReadAheadInputStream.java:174)
at com.mysql.jdbc.MysqlIO.readFully(MysqlIO.java:3008)
at com.mysql.jdbc.MysqlIO.reuseAndReadPacket(MysqlIO.java:3469)
... 137 common frames omitted

复制代码
1)异常链 socket read timeout -→ CommunicationsException -→ Error while extracting database name - falling back to empty error codes。因为没有返回error codes,spring SQLErrorCodesFactory 异常转换失败

2)connectTimeout 参数在建立连接后不会再生效

3)SHOW PROCESSLIST 查看mysql上正在执行的查询,发现慢查仍然在执行,也就是说对于慢查而言,此时断开连接并不能终止慢查的执行。

这就像你找个女孩结婚,种下了一粒种子,最后却因为门不当户不对一拍两散。但这例种子,却静悄悄的结出了果实。

4、总结
socketTimeout 参数有设置的意义,在查询时间超过一定的阈值后,断开连接可以防止客户端的连接被一直占用。

另外对于慢查监控而言,此种异常不方面直接统计运行时间(因为客户端连接被断开,sql未执行完毕),但可以根据异常类型来单独判断,对于这种严重的慢查监控有很重要的现实意义。

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
机器学习/深度学习 人工智能 运维
10 分钟搞懂 LLMOps
10 分钟搞懂 LLMOps
841 0
|
人工智能 网络协议 算法
5 分钟搞懂 ECN
5 分钟搞懂 ECN
1656 0
|
5月前
|
数据可视化 API
一文搞懂:【Havok】
一文搞懂:【Havok】
96 0
一文搞懂:_.cloneDeep(value)
一文搞懂:_.cloneDeep(value)
|
5月前
|
API
一文搞懂:关于串行接口
一文搞懂:关于串行接口
182 0
|
5月前
|
前端开发 JavaScript
一文搞懂:【Reduc】ReactCounterExample
一文搞懂:【Reduc】ReactCounterExample
39 0
|
5月前
一文搞懂:关于“isbuzy”问题
一文搞懂:关于“isbuzy”问题
25 0
|
5月前
|
机器学习/深度学习 定位技术
一文搞懂:【OpenJ_Bailian
一文搞懂:【OpenJ_Bailian
31 0
|
5月前
一文搞懂:【华为oj】iNOC产品部
一文搞懂:【华为oj】iNOC产品部
29 0
|
5月前
|
PHP
一文搞懂:yeild理解
一文搞懂:yeild理解
32 0
下一篇
无影云桌面