mysql 最朴素的监控方式
优采云 发布时间: 2022-09-19 12:15mysql 最朴素的监控方式
正文
大家好,我是Python人工智能技术
对于当前数据库的监控方式有很多,分为数据库自带、商用、开源三大类,每一种都有各自的特色;而对于 mysql 数据库由于其有很高的社区活跃度,监控方式更是多种多样,不管哪种监控方式最核心的就是监控数据,获取得到全面的监控数据后就是灵活的展示部分。那我们今天就介绍一下完全采用 mysql 自有方式采集获取监控数据,在单体下达到最快速、方便、损耗最小。本次文章完全使用 mysql 自带的 show 命令实现获取,从 connects、buffercache、lock、SQL、statement、Database throughputs、serverconfig7 大方面全面获取监控数据。1 连接数(Connects)2 缓存(bufferCache)3 锁(lock)备注:锁等待统计得数量为累加数据,每次获取得时候可以跟之前得数据进行相减,得到当前统计得数据4 SQL备注:当 mysqldumpslow 命令执行失败时,将慢日志同步到本地进行格式化处理。5 statement6 吞吐(Database throughputs)7 数据库参数(serverconfig)show variables
8 慢 SQL慢 SQL 指的是 MySQL 慢查询,具体指运行时间超过 long_query_time 值的 SQL。我们常听 MySQL 中有二进制日志 binlog、中继日志 relaylog、重做回滚日志 redolog、undolog 等。针对慢查询,还有一种慢查询日志 slowlog,用来记录在 MySQL 中响应时间超过阀值的语句。慢 SQL 对实际生产业务影响是致命的,所以测试人员在性能测试过程中,对数据库 SQL 语句执行情况实施监控,给开发提供准确的性能优化意见显得尤为重要。那怎么使用 Mysql 数据库提供的慢查询日志来监控 SQL 语句执行情况,找到消耗较高的 SQL 语句,以下详细说明一下慢查询日志的使用步骤:
<p mp-original-font-size="17" mp-original-line-height="25.600000381469727" style="margin-right: 8px;margin-left: 8px;outline: 0px;color: rgb(34, 34, 34);font-family: -apple-system, BlinkMacSystemFont, "Helvetica Neue", "PingFang SC", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: 0.544px;visibility: visible;text-align: center;line-height: 25.6px;">牛逼啊!接私活必备的 N 个开源项目!赶快收藏
<br /></p>
常见用法:
取出使用最多的 10 条慢查询
./mysqldumpslow -s c -t 10 /export/data/mysql/log/slow.log
取出查询时间最慢的 3 条慢查询
./mysqldumpslow -s t -t 3 /export/data/mysql/log/slow.log
注意:使用 mysqldumpslow 的分析结果不会显示具体完整的 sql 语句,只会显示 sql 的组成结构;假如: SELECTFROM sms_send WHERE service_id=10 GROUP BY content LIMIT 0, 1000;mysqldumpslow 命令执行后显示:
Count: 2 Time=1.5s (3s) Lock=0.00s (0s) Rows=1000.0 (2000), vgos_dba[vgos_dba]@[10.130.229.196]SELECTFROM sms_send WHERE service_id=N GROUP BY content LIMIT N, Nmysqldumpslow 的分析结果详解:通过这个工具就可以查询出来哪些 sql 语句是慢 SQL,从而反馈研发进行优化,比如加索引,该应用的实现方式等。常见慢 SQL 排查
不使用子查询
SELECTFROM t1 WHERE id (SELECT id FROM t2 WHERE name=’hechunyang’);
子查询在 MySQL5.5 版本里,内部执行计划器是这样执行的:先查外表再匹配内表,而不是先查内表 t2,当外表的数据很大时,查询速度会非常慢。
在 MariaDB10/MySQL5.6 版本里,采用 join 关联方式对其进行了优化,这条 SQL 会自动转换为 SELECT t1.FROM t1 JOIN t2 ON t1.id = t2.id;
但请注意的是:优化只针对 SELECT 有效,对 UPDATE/DELETE 子 查询无效, 生产环境尽量应避免使用子查询。
避免函数索引
SELECTFROM t WHERE YEAR(d) >= 2016;
由于 MySQL 不像 Oracle 那样⽀持函数索引,即使 d 字段有索引,也会直接全表扫描。
应改为 > SELECTFROM t WHERE d >= ‘2016-01-01’;
用 IN 来替换 OR 低效查询
慢 SELECTFROM t WHERE LOC_ID = 10 OR LOC_ID = 20 OR LOC_ID = 30;
高效查询 > SELECTFROM t WHERE LOC_IN IN (10,20,30);
LIKE 双百分号无法使用到索引
SELECTFROM t WHERE name LIKE ‘%de%’;
使用 SELECTFROM t WHERE name LIKE ‘de%’;
分组统计可以禁止排序
SELECT goods_id,count() FROM t GROUP BY goods_id;
默认情况下,MySQL 对所有 GROUP BY col1,col2… 的字段进⾏排序。如果查询包括 GROUP BY,想要避免排序结果的消耗,则可以指定 ORDER BY NULL 禁止排序。另外,搜索公众号程序员小乐后台回复“python进阶”,获取一份惊喜礼包。
使用 SELECT goods_id,count () FROM t GROUP BY goods_id ORDER BY NULL;
禁止不必要的 ORDER BY 排序
SELECT count(1) FROM user u LEFT JOIN user_info i ON u.id = i.user_id WHERE 1 = 1 ORDER BY u.create_time DESC;
使用 SELECT count (1) FROM user u LEFT JOIN user_info i ON u.id = i.user_id;
9 总结
欢迎有需要的同学试试,如果本文对您有帮助,也请帮忙点个 赞 + 在看 啦!❤️<br mp-original-font-size="17" mp-original-line-height="25.600000381469727" style="margin: 0px;padding: 0px;outline: 0px;max-width: 100%;box-sizing: border-box !important;word-wrap: break-word !important;font-size: 17px;line-height: 25.600000381469727px;" /><p data-tool="mdnice编辑器" mp-original-font-size="16" mp-original-line-height="28" style="margin: 0px;padding: 1em 0px 8px;outline: 0px;max-width: 100%;box-sizing: border-box !important;word-wrap: break-word !important;clear: both;min-height: 1em;font-family: Optima-Regular, Optima, PingFangSC-light, PingFangTC-light, "PingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;font-size: 16px;letter-spacing: 0.544px;color: rgb(74, 74, 74);line-height: 28px;">在 GitHub猿 还有更多优质项目系统学习资源,欢迎分享给其他同学吧!</p>
你还有什么想要补充的吗?