mysql死锁是什么原因(MySQL的MaxIdleConns不合理,会变成短连接的原因)
mysql死锁是什么原因
MySQL的MaxIdleConns不合理,会变成短连接的原因1背景最近石墨文档线上业务出现了一些性能问题,在突发流量情况下,有个业务性能急剧下降。该服务是依赖于数据库的业务,会批量获取数据库里的数据。在经过一系列的排查过程后,发现该服务到数据库的连接数经常超过MaxIdleConns,因此怀疑是数据库的配置导致的性能问题,所以以下针对数据库的代码进行了剖析,并做了相关实验。
2配置解读
|
maxIdleCount int // zero means defaultMaxIdleConns; negative means 0 maxOpen int // <= 0 means unlimited maxLifetime time .Duration // maximum amount of time a connection may be reused maxIdleTime time .Duration // maximum amount of time a connection may be idle before being closed |
可以看到以上四个配置,是我们GoMySQL客户端最重要的配置。
maxIdleCount最大空闲连接数,默认不配置,是2个最大空闲连接
maxOpen最大连接数,默认不配置,是不限制最大连接数
maxLifetime连接最大存活时间
maxIdleTime空闲连接最大存活时间
3源码解析我们的场景是客户端与MySQL建立的连接数经常大于最大空闲连接数,这会导致什么问题?我们看下下图中的源码。
我们可以看到,当最大空闲连接数小于客户端与数据库建立的连接数的时候,那么就会返回false,并且最大连接数关闭计数器加1。
然后上图中,我们就可以看到,连接被关闭了(MySQL源码里也不留点缓冲时间再关闭)。Go的MySQL客户端这个操作,就会导致当突发流量情况下,由于请求量级过大,超过了最大空闲连接数的负载,那么新的连接在放入连接池的时候,会被无情的关闭,变成短连接,导致你的服务性能进一步恶化。
4实验4.1模拟线上并发数大于MaxIdConns情况
测试代码,为了检测以上逻辑,假设了以下场景,设置最大连接数为100,最大空闲连接数为1,并发数为10的goroutine来请求数据库。我们通过MySQL的stats的maxIdleClosed的统计,可以看到下图,我们的连接不停的被关闭。
4.2模拟线上并发数小于MaxIdConns情况
测试代码,假设了以下场景,设置最大连接数为100,最大空闲连接数为20,并发数为10的goroutine来请求数据库,可以看到下图中,无MaxIdleClosed的关闭统计。
4.3抓包验证线上并发数大于MaxIdConns情况
测试代码,为了验证没有理解错代码,抓个包最稳妥。我们将main函数里放个select{},程序执行完mysql的语句后,看下tcp状态和抓包数据。
可以发现确实是tcp的状态统计与MySQL客户端的统计是一致的,并且存在fin包。
5总结当突发流量情况下,由于请求量级过大,超过了最大空闲连接数的负载,那么新的连接在放入连接池的时候,会被关闭,将连接变成短连接,导致服务性能进一步恶化。为了避免这种情况,下面列举了,可以优化的措施。
提前将maxIdleConns设大,避免出现短连接
做好mysql读写分离
提升mysql的吞吐量:精简返回字段,没必要的字段不要返回,能够够快复用连接
吞吐量的包尽量不要太大,避免分包
优化连接池,当客户端到MySQL的连接数大于最大空闲连接的时候,关闭能够做一下延迟(官方不支持,估计只能自己实现)
读请求的最好不要放MySQL里,尽量放redis里
6测试代码https://github.com/gotomicro/test/tree/main/gorm
以上就是MySQL的MaxIdleConns不合理,会变成短连接的原因的详细内容,更多关于MySQL的MaxIdleConns不合理的资料请关注开心学习网其它相关文章!
- mysql8修改默认端口(MySQL 8.0新特性 — 管理端口的使用简介)
- mysql的事务隔离级别怎么实现(mysql、oracle默认事务隔离级别的说明)
- mysql千万级别数据查询优化(mysql千万级数据量根据索引优化查询速度的实现)
- mysql索引详解及基本用法(Mysql普通索引与唯一索引的选择详析)
- 如何使java与sqlserver数据库连接(java连接mysql数据库 java连接sql server数据库)
- mac更改mysql密码(Mac下mysql 8.0.22 找回密码的方法)
- mysql导出数据的方法
- mysql 如何选择隔离级别(全面解析MySQL中的隔离级别)
- mysql分库分表视图(MySQL分库分表与分区的入门指南)
- mysql dateformat(MySQL的DATE_FORMAT函数的使用)
- navicat连接mysql报1045(解决Navicat for MySQL 连接 MySQL 报2005错误的问题)
- mysql中修改表的字段名(MySQL 使用SQL语句修改表名的实现)
- mysql如何修改列的默认值(mysql查询的时候给字段赋默认值操作)
- mysql更新数据库表中的数据语法(Mysql联表update数据的示例详解)
- mysql安装详解(MySQL Router的安装部署)
- mysql完整整理(Mysql隔离性之Read View的用法说明)
- 网坛停摆三巨头亏损惨重,费德勒跌幅88 纳达少赚2400万(网坛停摆三巨头亏损惨重)
- Beyond 版本《无人深空》主线任务攻略 阿特拉斯之道(版本无人深空主线任务攻略)
- 全球科技界最有钱大佬TOP 15 你知道几位(全球科技界最有钱大佬TOP)
- 2主力后腰缺阵 泰山队奇兵有望获重用,赛季0出场,迎来中超首秀(泰山队奇兵有望获重用)
- 三分71 生死战爆发 篮网旧将丁威迪今天成奇兵,助队赢球(三分71生死战爆发)
- 《红 雄安》系列广播剧第一集 水上奇兵雁翎队(雄安系列广播剧第一集)
热门推荐
- 香港免费虚拟主机(香港虚拟主机租用要怎么选择?)
- tomcat需要修改哪几个端口参数(详解tomcat各个端口的作用)
- php和java联系(PHP实现与java 通信的插件使用教程)
- sql server 进阶(SqlServer AS的用法)
- centos7.5安装mysql教程(CentOS8下MySQL 8.0安装部署的方法)
- canvas如何调试(关于canvas.toDataURL 在iOS运行失败的问题解决)
- 配置阿里云docker镜像地址(Docker配置阿里云镜像加速pull的实现)
- 织梦怎么添加图片(织梦怎么去掉上传图片的水印改为自己设计的水印)
- 使用 iosOverlay 弹出提示信息
- laravel count 报错(解决laravel5.5访问public报错的问题)
排行榜
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9