mysql 使用心得和性能调优原则


A.mysql查询的查询执行过程
1.client发送一条查询sql 给到mysql server ;
2.服务器检查权限后,首先查看是否命中缓存,命中缓存直接返回缓存结果,否则进行下一个阶段;
3.服务器解析sql,进行预处理,查询优化器根据一定规则制定出查询执行计划;
4.服务器执行查询执行计划;
5.返回结果到客户端.

B.mysql的sql语句书写过程和执行过程

1.书写过程: select ... distinct ... from ... where ... group by ... having ... order by ... limit[offset][rows]
2.执行过程: from ... where ... group by ... having ... select ... distinct ... order by ... limit[offset][rows]

C.数据库调优的7大原则
1.消耗相同IO的sql,选择并发量更高的sql ,进行优化

       例如: 每小时并发量为1W,每次消耗10个IO,
                  每小时并发量10,每次消耗1W个IO,
       相同的需要将IO每小时降低至7W个IO, 第一个sql只需要将10个IO降低至7个IO,而第二个则需要将1W个IO降低至7K个,        工作量明显第二个更大更难。

2.从explain和profile入手 (具体使用,下文涉及)
       Explain: 可以让我们查看MYSQL执行一条SQL所选择的执行计划;
Profiling: 可以用来准确定位一条SQL的性能瓶颈;

3.在索引中完成排列,索引的查询效率很高,如果在索引中完成了排列,极大提高效率。
4.使用最小的columns,避免一些不需要的列出现在select 之后
5.使用最有效的过滤条件
6.尽量避免使用join和子查询
7.如果用到join ,使用小结果集驱动大结果集

D.常见的mysql索引失效
1.避免在where 子句之后使用范围符号 != ,<,>, 这样会索引失效
2.避免使用or链接,这样会索引失效,进行全表扫描
3.使用like  
   select id from t where name like 'abc%' 可以使用索引
   select id from t where name like '%abc%' 不能使用索引,全表扫描
4.如果在 where 子句中使用参数,也会导致全表扫描
    因为SQL只有在运行时才会解析局部变量,但优化程序不能将访问计划的选择推迟到运行时;它必须在编译时进行选择。然而,如果在编译时建立访问计划,变量的值还是未知的,因而无法作为索引选择的输入项。如下面语句将进行全表扫描: 
select id from t where num=@num 
可以改为强制查询使用索引: 
select id from t with(index(索引名)) where num=@num 
5. 应尽量避免在 where 子句中对字段进行表达式操作,这将导致引擎放弃使用索引而进行全表扫描。如: 
select id from t where num/2=100 
应改为: 
select id from t where num=100*2 
6. 应尽量避免在where子句中对字段进行函数操作,这将导致引擎放弃使用索引而进行全表扫描。如: 
select id from t where substring(name,1,3)='abc'--name以abc开头的id 
select id from t where datediff(day,createdate,'2005-11-30')=0--'2005-11-30'生成的id 
应改为: 
select id from t where name like 'abc%' 
select id from t where createdate>='2005-11-30' and createdate<'2005-12-1' 
7. 不要在 where 子句中的“=”左边进行函数、算术运算或其他表达式运算,否则系统将可能无法正确使用索引。
8. 在使用索引字段作为条件时,如果该索引是复合索引,那么必须使用到该索引中的第一个字段作为条件时才能保证系统使用该索引,否则该索引将不会被使用,并且应尽可能的让字段顺序与索引顺序相一致。 

E . explain 和 profile 的具体使用

1,Explain: 可以让我们查看MYSQL执行一条SQL所选择的执行计划;
2,Profiling: 可以用来准确定位一条SQL的性能瓶颈;
EXPLAIN:
1,使用方式:
explain SQL;
2,返回结果:
  1,ID:执行查询的序列号;
  2,select_type:使用的查询类型
  1,DEPENDENT SUBQUERY:子查询中内层的第一个SELECT,依赖于外部查询的结果集;
  2,DEPENDENT UNION:子查询中的UNION,且为UNION 中从第二个SELECT 开始的后面所有SELECT,同样依赖于外部查询的结果集;
  3,PRIMARY:子查询中的最外层查询,注意并不是主键查询;
  4,SIMPLE:除子查询或者UNION 之外的其他查询;
  5,SUBQUERY:子查询内层查询的第一个SELECT,结果不依赖于外部查询结果集;
  6,UNCACHEABLE SUBQUERY:结果集无法缓存的子查询;
  7,UNION:UNION 语句中第二个SELECT 开始的后面所有SELECT,第一个SELECT 为PRIMARY
  8,UNION RESULT:UNION 中的合并结果;
  3,table:这次查询访问的数据表;
  4,type:对表所使用的访问方式:
  1,all:全表扫描
  2,const:读常量,且最多只会有一条记录匹配,由于是常量,所以实际上只需要读一次;
  3,eq_ref:最多只会有一条匹配结果,一般是通过主键或者唯一键索引来访问;
  4,fulltext:全文检索,针对full text索引列;
  5,index:全索引扫描;
  6,index_merge:查询中同时使用两个(或更多)索引,然后对索引结果进行merge 之后再读取表数据;
  7,index_subquery:子查询中的返回结果字段组合是一个索引(或索引组合),但不是一个主键或者唯一索引;
  8,rang:索引范围扫描;
  9,ref:Join 语句中被驱动表索引引用查询;
  10,ref_or_null:与ref 的唯一区别就是在使用索引引用查询之外再增加一个空值的查询;
  11,system:系统表,表中只有一行数据;
  12,unique_subquery:子查询中的返回结果字段组合是主键或者唯一约束;
  5,possible_keys:可选的索引;如果没有使用索引,为null;
  6,key:最终选择的索引;
  7,key_len:被选择的索引长度;
  8,ref:过滤的方式,比如const(常量),column(join),func(某个函数);
  9,rows:查询优化器通过收集到的统计信息估算出的查询条数;
  10,Extra:查询中每一步实现的额外细节信息
  1,Distinct:查找distinct 值,所以当mysql 找到了第一条匹配的结果后,将停止该值的查询而转为后面其他值的查询;
  2,Full scan on NULL key:子查询中的一种优化方式,主要在遇到无法通过索引访问null值的使用使用;
  3,Impossible WHERE noticed after reading const tables:MySQL Query Optimizer 通过收集到的统计信息判断出不可能存在结果;
  4,No tables:Query 语句中使用FROM DUAL 或者不包含任何FROM 子句;
  5,Not exists:在某些左连接中MySQL Query Optimizer 所通过改变原有Query 的组成而使用的优化方法,可以部分减少数据访问次数;
  6,Select tables optimized away:当我们使用某些聚合函数来访问存在索引的某个字段的时候,MySQL Query Optimizer 会通过索引而直接一次定位到所需的数据行完成整个查询。当然,前提是在Query 中不能有GROUP BY 操作。如使用MIN()或者MAX()的时候;
  7,Using filesort:当我们的Query 中包含ORDER BY 操作,而且无法利用索引完成排序操作的时候,MySQL Query Optimizer 不得不选择相应的排序算法来实现。
  8,Using index:所需要的数据只需要在Index 即可全部获得而不需要再到表中取数据;
  9,Using index for group-by:数据访问和Using index 一样,所需数据只需要读取索引即可,而当Query 中使用了GROUP BY 或者DISTINCT 子句的时候,如果分组字段也在索引中,Extra 中的信息就会是Using index for group-by;
  10,Using temporary:当MySQL 在某些操作中必须使用临时表的时候,在Extra 信息中就会出现Using temporary 。主要常见于GROUP BY 和ORDER BY 等操作中。
  11,Using where:如果我们不是读取表的所有数据,或者不是仅仅通过索引就可以获取所有需要的数据,则会出现Using where 信息;
  12,Using where with pushed condition:这是一个仅仅在NDBCluster 存储引擎中才会出现的信息,而且还需要通过打开Condition Pushdown 优化功能才可能会被使用。控制参数为engine_condition_pushdown 。
profiling:
Query Profiler是MYSQL5.1之后提供的一个很方便的用于诊断Query执行的工具,能够准确的获取一条查询执行过程中的CPU,IO等情况;
1,开启profiling:set profiling=1;
2,执行QUERY,在profiling过程中所有的query都可以记录下来;
3,查看记录的query:show profiles;
4,选择要查看的profile:show profile cpu, block io for query 6;
status是执行SQL的详细过程;
Duration:执行的具体时间;
CPU_user:用户CPU时间;
CPU_system:系统CPU时间;
Block_ops_in:IO输入次数;
Block_ops_out:IO输出次数;
profiling只对本次会话有效;

猜你喜欢

转载自blog.csdn.net/hhy100/article/details/80693269