dba+开源工具:囚禁慢SQL的简易利器(附下载)

贺春旸 2021-08-02 16:25:00

工具研发者介绍

贺春旸,凡普金科和爱钱进DBA团队负责人,《MySQL管理之道:性能调优、高可用与监控》第一、二版作者,曾任职于中国移动飞信、安卓机锋网。四次荣获dbaplus年度MVP,致力于MariaDB、MongoDB等开源技术的研究,主要负责数据库性能调优、监控和架构设计。

工具下载:

https://github.com/hcymysql/imprison_rg

 

简介

 

数据库90%的性能问题基本都是由SQL引起的,线上SQL的执行快慢,会直接影响系统的稳定性。

 

如果你刚入职一家公司,线上数据库CPU被慢SQL给打爆了,但你又不敢直接将慢SQL杀死,万一出点事可能自己得负连带责任。

 

退而求其次,可以利用MySQL 8.0资源组该功能,有效解决慢SQL引发的CPU告警。

 

资源组的作用是资源隔离(可以理解为开通云主机时勾选的硬件配置),将线上的慢SQL线程id分配给CPU一个核,让它慢慢跑,从而不影响CPU的整体性能。

 

这里我封装了一个PHP脚本,可简化DBA输入相关资源组命令的操作,直接在SHELL里运行即可。

 

该工具默认把执行时间超过10秒的慢SQL(SELECT | INSERT | UPDATE | DELETE | ALTER),捆绑在CPU最后一个核。

 

操作演示

 

环境准备:

 

shell> yum install -y php php-mysql

 

修改配置文件:

 

######下面的配置信息修改成你自己的!!!######

shell> vim imprison_rg.php

$hostip='127.0.0.1';

$username='admin';

$password='hechunyang';

$dbname='test';

$dbport=3306;

$long_time=10; //执行时间10秒

 

 

部署在主库运行:

 

shell> php imprison_rg.php

 

关闭并删除资源组:

 

shell> php imprison_rg.php  --stop

 

图片

 

会在工具目录下生成slowlog.txt文件保存慢SQL。

 

shell> cat slowlog.txt

2021-07-21 18:22:30

用户名:root

来源IP:localhost

数据库名:test

SQL语句:select sleep(3600)

资源组:slowsql_rg

执行时间:13 秒

 

 

注:资源组启动需开启CAP_SYS_NICE功能,并重启mysqld进程生效。

 

开启步骤如下:

 

shell> setcap cap_sys_nice+ep /usr/local/mysql/bin/mysqld

shell> getcap /usr/local/mysql/bin/mysqld /usr/local/mysql/bin/mysqld = cap_sys_nice+ep

shell> systemctl restart mysqld.service

 

验证:

 

使用top命令查看CPU状态信息,发现慢SQL已经绑定在CPU最后一核上运行。对于复杂、执行时间长、消耗资源多的慢SQL,我们可以将其设置特定的资源组,限制SQL查询的使用资源,避免导致其它正常查询不被响应,甚至导致MySQL直接hang住。

 

图片

 

下载方式

 

此工具现通过dbaplus社群免费为大家提供下载使用。若使用过程中有任何问题或建议,可随时与我们联系,欢迎大家试用。

 

登录以下链接即可下载:

https://github.com/hcymysql/imprison_rg

 

更多开源工具&脚本

 

图片

 

更多工具及下载可登陆:

http://dbaplus.cn/list-142-1.html

最新评论
访客 2021年09月03日

有没有1000多张表

访客 2021年08月28日

metrics =》 metrix 错误

访客 2021年08月25日

只看到如何避免,如何减少书写慢 sql

访客 2021年08月25日

没看到如何治理呀

访客 2021年07月23日

果然k8s不是神!

活动预告