MySQL调优系列（一）——性能监控

从本文开始，我们开始MySQL调优之路。
本文主要从show profile、performance_schema、show processlist讲解mysql的性能监控。

一、MySql架构体系

调优之路的最开始，我们先了解MySql架构体系：
在这里插入图片描述
这是官方给的体系图，从图中我们总结如下：
（1）连接器：不同语言中与MySQL的交互。
（2）连接池：存储和管理连接信息。
（3）系统管理和控制工具：提供数据库系统的管理和控制功能，例如对数据库中的数据进行备份和恢复，保证整个数据库的安全性，提供安全管理，对整个数据库的集群进行协调和管理等。
（4）SQL接口：接收客户命令，返回执行结果。
（5）解析器：SQL命令传递到解析器的时候会被解析器验证和解析。分类/验证语义合法性。
（6）查询优化器：优化客户端请求query，根据客户端请求的 query 语句，和数据库中的一些统计信息，在一系列算法的基础上进行分析，得出一个最优的策略，告诉后面的程序如何取得这个 query 语句的结果。（交由优化器将其转化成执行计划，然后与存储引擎交互。）
（7）缓存：执行查询语句的时候，会先查询缓存（MySQL 8.0 版本后移除，因为这个功能不太实用）。（缓存机制是由一系列小缓存组成的。比如表缓存，记录缓存，权限缓存，引擎缓存等。如果查询缓存有命中的查询结果，查询语句就可以直接去查询缓存中取数据。）
（8）可插拔存储引擎：主要负责数据的存储和读取，与底层的文件进行交互，采用的是插件式架构，支持 InnoDB、MyISAM、Memory 等多种存储引擎。后续会单独出一篇文章分析存储引擎。
我这边5.7版本的mysql，默认存储引擎如下：show engines;
在这里插入图片描述
默认存储引擎是InnoDB，只有 InnoDB 支持事务。
（9）系统文件层：该层负责将数据库的数据和日志存储在文件系统之上，并完成与存储引擎的交互，是文件的物理存储层。主要包含日志文件，数据文件，配置文件，pid 文件，socket 文件等。
总结如下：
在这里插入图片描述

二、show profile

show profile能够查出服务器上执行的所有语句的运行状态，包括在运行过程中执行了哪些操作，各占用了多少时间。
profile已经不推荐了，即将被淘汰，默认是禁用的。

select @@profiling;//查询当前状态
set profiling=1;//设置打开

如图所示：
在这里插入图片描述

1、show profile语法

SHOW PROFILE [type [, type] ... ]
    [FOR QUERY n]
    [LIMIT row_count [OFFSET offset]]

type: {
    
    
    ALL                显示所有信息
  | BLOCK IO           显示块输入和输出操作的数量
  | CONTEXT SWITCHES   显示自愿上下文切换和非自愿上下文切换的数量
  | CPU                显示用户和系统的CPU使用时间
  | IPC                显示已发送和已接收消息（messages）的数量
  | MEMORY             -- 尚未生效
  | PAGE FAULTS        显示主要和次要页面错误的数量
  | SOURCE             显示源代码中函数名称以及该函数所在文件的名称和行号
  | SWAPS              显示SWAP数量
}

2、show profiles

会展示各个语句的执行时长。
在这里插入图片描述

3、show profile

用于单独分析最近一条执行的sql语句的详细资源占用信息和工作状况，默认显示状态以及它们持续的时间。
在这里插入图片描述
可以给show profile 指定一个 for query id 来查看指定 id 的语句，还可以给输出添加新的列，新的列看之前的type。

show profile all for query id;//id 为 show profiles 查出来的某条记录的Query_ID。

在这里插入图片描述

三、performance_schema

MySQL的performance_schema 用于监控MySQL server在一个较低级别的运行过程中的资源消耗、资源等待等情况。
在这里插入图片描述
performance_schema默认是打开的。
关于performance_schema的配置与参数，其他地方有很多讲解，我觉得又臭又长，就不进行总结了。
实际查询操作，我们这边记录一下：

--1、哪类的SQL执行最多？
SELECT DIGEST_TEXT,COUNT_STAR,FIRST_SEEN,LAST_SEEN FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC
--2、哪类SQL的平均响应时间最多？
SELECT DIGEST_TEXT,AVG_TIMER_WAIT FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC
--3、哪类SQL排序记录数最多？
SELECT DIGEST_TEXT,SUM_SORT_ROWS FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC
--4、哪类SQL扫描记录数最多？
SELECT DIGEST_TEXT,SUM_ROWS_EXAMINED FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC
--5、哪类SQL使用临时表最多？
SELECT DIGEST_TEXT,SUM_CREATED_TMP_TABLES,SUM_CREATED_TMP_DISK_TABLES FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC
--6、哪类SQL返回结果集最多？
SELECT DIGEST_TEXT,SUM_ROWS_SENT FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC
--7、哪个表物理IO最多？
SELECT file_name,event_name,SUM_NUMBER_OF_BYTES_READ,SUM_NUMBER_OF_BYTES_WRITE FROM file_summary_by_instance ORDER BY SUM_NUMBER_OF_BYTES_READ + SUM_NUMBER_OF_BYTES_WRITE DESC
--8、哪个表逻辑IO最多？
SELECT object_name,COUNT_READ,COUNT_WRITE,COUNT_FETCH,SUM_TIMER_WAIT FROM table_io_waits_summary_by_table ORDER BY sum_timer_wait DESC
--9、哪个索引访问最多？
SELECT OBJECT_NAME,INDEX_NAME,COUNT_FETCH,COUNT_INSERT,COUNT_UPDATE,COUNT_DELETE FROM table_io_waits_summary_by_index_usage ORDER BY SUM_TIMER_WAIT DESC
--10、哪个索引从来没有用过？
SELECT OBJECT_SCHEMA,OBJECT_NAME,INDEX_NAME FROM table_io_waits_summary_by_index_usage WHERE INDEX_NAME IS NOT NULL AND COUNT_STAR = 0 AND OBJECT_SCHEMA <> 'mysql' ORDER BY OBJECT_SCHEMA,OBJECT_NAME;
--11、哪个等待事件消耗时间最多？
SELECT EVENT_NAME,COUNT_STAR,SUM_TIMER_WAIT,AVG_TIMER_WAIT FROM events_waits_summary_global_by_event_name WHERE event_name != 'idle' ORDER BY SUM_TIMER_WAIT DESC
--12-1、剖析某条SQL的执行情况，包括statement信息，stege信息，wait信息
SELECT EVENT_ID,sql_text FROM events_statements_history WHERE sql_text LIKE '%count(*)%';
--12-2、查看每个阶段的时间消耗
SELECT event_id,EVENT_NAME,SOURCE,TIMER_END - TIMER_START FROM events_stages_history_long WHERE NESTING_EVENT_ID = 1553;
--12-3、查看每个阶段的锁等待情况
SELECT event_id,event_name,source,timer_wait,object_name,index_name,operation,nesting_event_id FROM events_waits_history_longWHERE nesting_event_id = 1553;

四、show processlist

show processlist 是显示用户正在运行的线程，观察线程的状态， root 用户能看到所有正在运行的线程外，其他用户都只能看到自己正在运行的线程。
show processlist 显示的信息都是来自MySQL系统库 information_schema 中的 processlist 表。

在这里插入图片描述
各属性如下：

参考：show processlist 史上最全参数详解及解决方案