MySQL 慢查询日志分析

慢查询日志

MySQL的慢查询日志是MySQL提供的一种日志记录，它用来记录在MySQL中响应时间超过阈值的语句。运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中。

默认情况下，MySQL数据库没有开启慢查询日志，需要手动设置这个参数。

如果不是调优需要的话，不建议开启这个参数。因为开启慢查询日志会或多或少带来一定的性能损耗。

慢查询日志的查看以及开启

show variables like '%slow_query_log%';

mysql> show variables like '%slow_query_log%';
+---------------------+---------------------------+
| Variable_name       | Value                     |
+---------------------+---------------------------+
| slow_query_log      | OFF                       |
| slow_query_log_file | /var/lib/mysql/m-slow.log |
+---------------------+---------------------------+

默认情况下，slow_query_log的值是OFF,表示慢查询日志是禁用的。

开启慢查询日志

set global slow_query_log=1

上句表示开启了慢查询日志，但是只对当前数据库生效，如果mysql重启后则会失效。

如果要永久生效，就必须配置到my.cnf

修改my.cnf文件([mysqlId下增加或修改参数])

[mysqlId]
slow_query_log=1
# slow_query_log_file=/var/lib/mysql/wojiushiwo-slow.log

slow_query_log_file指定了慢查询日志文件的存放路径，系统默认会给一个缺省文件。

开启慢查询日志后，什么样的sql会记录到慢查询里面呢?

这个由参数long_query_time决定，默认情况下long_query_time的值是10秒。

show variables like 'long_query_time%';

mysql> show variables like 'long_query_time%';
+-----------------+-----------+
| Variable_name   | Value     |
+-----------------+-----------+
| long_query_time | 10.000000 |
+-----------------+-----------+
1 row in set (0.00 sec)

可以修改默认的这个时间。只有大于long_query_time的sql才会被记录下来。

手动设置慢查询阈值时间

set global long_query_time=3;

设置后需要重新连接或者新开一个会话才能看到修改过的值

查询当前系统中有多少条慢查询记录

show global status like '%slow_queries%';

我们在配置文件my.cnf中统一进行下慢查询配置，随后举例说明

[mysqlId]
slow_query_log=1
slow_query_log_file=/var/lib/mysql/wojiushiwo-slow.log
long_query_time=3
log_output=FILE

重新查看慢查询日志配置

mysql> show variables like '%slow_query_log%';
+---------------------+------------------------------------+
| Variable_name       | Value                              |
+---------------------+------------------------------------+
| slow_query_log      | ON                                 |
| slow_query_log_file | /var/lib/mysql/wojiushiwo-slow.log |
+---------------------+------------------------------------+
2 rows in set (0.00 sec)

mysql> show variables like '%long_query_time%';
+-----------------+----------+
| Variable_name   | Value    |
+-----------------+----------+
| long_query_time | 3.000000 |
+-----------------+----------+
1 row in set (0.00 sec)

发现配置已经生效。

sleep函数会休眠n秒，我们以这个函数来模拟慢sql，如果休眠时间超过慢查询阈值，则会被记录到日志中

## 设置的慢查询时间是3s 因此下面的sql会归为慢查询sql
select sleep(4);

查看/var/lib/mysql/wojiushiwo-slow.log内容如下：

/usr/sbin/mysqld, Version: 5.7.29-log (MySQL Community Server (GPL)). started with:
Tcp port: 0  Unix socket: /var/lib/mysql/mysql.sock
Time                 Id Command    Argument
# Time: 2020-02-14T21:45:57.374322Z
# User@Host: root[root] @  [192.168.0.107]  Id:     3
# Query_time: 4.010425  Lock_time: 0.000000 Rows_sent: 1  Rows_examined: 0
use test2;
SET timestamp=1581716757;
select sleep(4);

发现我们的SQL已经在里面了

我们还可以查看下当前系统中慢查询记录

mysql> show global status like '%slow_queries%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Slow_queries  | 1     |
+---------------+-------+
1 row in set (0.00 sec)

没错这里的1条就是我们的select sleep(4)

在开发中找到了慢sql，我们可以根据执行计划等进行合理的优化，从而提升sql执行性能。

日志分析工具mysqldumpslow

在生产环境中，如果要手工分析日志，查找、分析sql，MySQL提供了日志分析工具mysqldumpslow。

mysqldumpslow常用参数:

s：按何种方式排序
c：访问次数
l：锁定时间
r：返回记录
t：查询时间
al：平均返回记录数
at：平均查询时间
t：返回前面多少条的数据
g：后面搭配一个正则表达式，大小写不敏感

也可以通过mysqldumpslow --help查询参数

[root@m mysql]# mysqldumpslow --help
Usage: mysqldumpslow [ OPTS... ] [ LOGS... ]

Parse and summarize the MySQL slow query log. Options are

  --verbose    verbose
  --debug      debug
  --help       write this text to standard output

  -v           verbose
  -d           debug
  -s ORDER     what to sort by (al, at, ar, c, l, r, t), 'at' is default
                al: average lock time
                ar: average rows sent
                at: average query time
                 c: count
                 l: lock time
                 r: rows sent
                 t: query time
  -r           reverse the sort order (largest last instead of first)
  -t NUM       just show the top n queries
  -a           don't abstract all numbers to N and strings to 'S'
  -n NUM       abstract numbers with at least n digits within names
  -g PATTERN   grep: only consider stmts that include this string
  -h HOSTNAME  hostname of db server for *-slow.log filename (can be wildcard),
               default is '*', i.e. match all
  -i NAME      name of server instance (if using mysql.server startup script)
  -l           don't subtract lock time from total time

使用举例

得到返回记录最多的10个sql

mysqldumpslow -s r -t 10 /var/lib/mysql/wojiushiwo-slow.log

[root@m mysql]# mysqldumpslow -s r -t 10 /var/lib/mysql/wojiushiwo-slow.log

Reading mysql slow query log from /var/lib/mysql/wojiushiwo-slow.log
Count: 1  Time=4.01s (4s)  Lock=0.00s (0s)  Rows=1.0 (1), root[root]@[192.168.0.107]
  select sleep(N)

Died at /usr/bin/mysqldumpslow line 167, <> chunk 1.

得到访问次数最多的10个sql

mysqldumpslow -s c -t 10 /var/lib/mysql/wojiushiwo-slow.log

[root@m mysql]# mysqldumpslow -s c -t 10 /var/lib/mysql/wojiushiwo-slow.log

Reading mysql slow query log from /var/lib/mysql/wojiushiwo-slow.log
Count: 1  Time=4.01s (4s)  Lock=0.00s (0s)  Rows=1.0 (1), root[root]@[192.168.0.107]
  select sleep(N)

Died at /usr/bin/mysqldumpslow line 167, <> chunk 1.

得到按照时间排序的前10条里面含有左连接的查询语句

mysqldumpslow -s t -t 10 -g "left join" /var/lib/mysql/wojiushiwo-slow.log

## 这里 没有符合条件的慢SQL
root@m mysql]# mysqldumpslow -s t -t 10 -g "left join" /var/lib/mysql/wojiushiwo-slow.log

Reading mysql slow query log from /var/lib/mysql/wojiushiwo-slow.log
Died at /usr/bin/mysqldumpslow line 167, <> chunk 3.

注意：查询慢sql时建议与more连用，否则可能会因为有很多sql而出现爆屏的情况,

mysqldumpslow -s r -t 10 /var/lib/mysql/wojiushiwo-slow.log | more

码农的进阶之路

发布了116 篇原创文章 · 获赞 23 · 访问量 8万+

私信关注