一. MySQL常见瓶颈
- CPU
SQL中对大量数据进行比较、关联、排序、分组。 - IO
实例内存满足不了缓存数据或排序等需要,导致产生大量物理 IO。
查询执行效率低,扫描过多数据行。 - 锁
不适宜的锁的设置,导致线程阻塞,性能下降。
死锁,线程之间交叉调用资源,导致死锁,程序卡住。 - 服务器硬件的性能瓶颈
top,free, iostat和vmstat来查看系统的性能状态
二. Explain
- 是什么?
查看执行计划。使用EXPLAIN关键字可以模拟优化器执行SQL查询语句,从而知道MySQL是如何处理你的SQL语句的。分析你的查询语句或是表结构的性能瓶颈。
官网介绍:https://dev.mysql.com/doc/refman/5.5/en/explain-output.html - 能干嘛?
表的读取顺序
哪些索引可以使用
数据读取操作的操作类型
哪些索引被实际使用
表之间的引用
每张表有多少行被优化器查询
CREATE TABLE t1(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));
CREATE TABLE t2(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));
CREATE TABLE t3(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));
CREATE TABLE t4(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));
INSERT INTO t1(content) VALUES(CONCAT('t1_',FLOOR(1+RAND()*1000)));
INSERT INTO t2 (content) VALUES(CONCAT('t2_',FLOOR(1+RAND()*1000)));
INSERT INTO t3(content) VALUES(CONCAT('t3_',FLOOR(1+RAND()*1000)));
INSERT INTO t4(content) VALUES(CONCAT('t4_',FLOOR(1+RAND()*1000)));
- 怎么玩?
Explain + SQL 语句。
执行计划包含的信息: - 各字段解释:
- id
select查询的序列号,包含一组数字,表示查询中执行select子句或操作表的顺序。
三种情况:
id相同,执行顺序由上至下。 - id不同,如果是子查询,id的序号会递增,id值越大优先级越高,越先被执行。
- id相同不同,同时存在。
id如果相同,可以认为是一组,从上往下顺序执行;
在所有组中,id值越大,优先级越高,越先执行。
衍生表 = derived2 --> derived + 2 (2 表示由 id =2 的查询衍生出来的表。type 肯定是 all ,因为衍生的表没有建立索引) - select_type
- 查询的类型,主要是用于区别 普通查询、联合查询、子查询等的复杂查询。
SIMPLE:简单的 select 查询,查询中不包含子查询或者UNION
PRIMARY:查询中若包含任何复杂的子部分,最外层查询则被标记为Primary
DERIVED:在FROM列表中包含的子查询被标记为DERIVED(衍生)。
MySQL会递归执行这些子查询, 把结果放在临时表里。DERIVED 通过子查询查出来的临时表。
SUBQUERY:在SELECT或WHERE列表中包含了子查询。
DEPENDENT SUBQUERY:在SELECT或WHERE列表中包含了子查询,子查询基于外层。
DEPENDENT SUBQUERY & SUBQUERY区别:
DEPENDENT SUBQUERY:子查询结果为 多值
SUBQUERY:查询结果为 单值
UNCACHEABLE SUBQUREY:无法被缓存的子查询
UNION:若第二个SELECT出现在UNION之后,则被标记为UNION;若UNION包含在FROM子句的子查询中,外层SELECT将被标记为:DERIVED。UNION RESULT 两个语句执行完后的结果。
UNION RESULT:从UNION表获取结果的SELECT。 - table
显示这一行的数据是关于哪张表的。 - type
访问类型排列。 - type显示的是访问类型,是较为重要的一个指标,结果值从最好到最坏依次是:
system > const > eq_ref > ref > fulltext > ref_or_null > index_merge > unique_subquery > index_subquery > range(尽量保证) > index > ALL
system>const>eq_ref>ref>range>index>ALL
一般来说,得保证查询至少达到range级别,最好能达到ref。
system:表只有一行记录(等于系统表),这是const类型的特列,平时不会出现,这个也可以忽略不计。
const:表示通过索引一次就找到了,const用于比较primary key或者unique索引。因为只匹配一行数据,所以很快。如将主键置于where列表中,MySQL就能将该查询转换为一个常量。 - eq_ref:唯一性索引扫描,对于每个索引键,表中只有一条记录与之匹配。常见于主键或唯一索引扫描。
- ref:非唯一性索引扫描,返回匹配某个单独值的所有行.
本质上也是一种索引访问,它返回所有匹配某个单独值的行,然而,
它可能会找到多个符合条件的行,所以他应该属于查找和扫描的混合体。
range:只检索给定范围的行,使用一个索引来选择行。key 列显示使用了哪个索引。一般就是在你的where语句中出现了between、<、>、in等的查询。这种范围扫描索引扫描比全表扫描要好,因为它只需要开始于索引的某一点,而结束语另一点,不用扫描全部索引。
index:Full Index Scan,index与ALL区别为index类型只遍历索引树。这通常比ALL快,因为索引文件通常比数据文件小。(也就是说虽然all和Index都是读全表,但index是从索引中读取的,而all是从硬盘中读的)
all:Full Table Scan,将遍历全表以找到匹配的行
index_merge:在查询过程中需要多个索引组合使用,通常出现在有 or 的关键字的sql中。
ref_or_null:对于某个字段既需要关联条件,也需要null值得情况下。查询优化器会选择用ref_or_null连接查询。
index_subquery:利用索引来关联子查询,不再全表扫描。
unique_subquery :该联接类型类似于index_subquery。 子查询中的唯一索引。
- possible_keys
显示可能应用在这张表中的索引,一个或多个。
查询涉及到的字段上若存在索引,则该索引将被列出,但不一定被查询实际使用。 - key
实际使用的索引。如果为NULL,则没有使用索引。
查询中若使用了覆盖索引,则该索引和查询的select字段重叠。 - 当查询具体某一字段时,且那个字段有索引时,key 值会显示为索引。
- key_len
表示索引中使用的字节数,可通过该列计算查询中使用的索引的长度。在不损失精确性的情况下,长度越短越好。
ken_len显示的值为索引字段的最大可能长度,并非实际使用长度,即ken_len是根据表定义计算所得,不是通过表内检索出的。
-- 如何计算?
EXPLAIN SELECT * FROM emp WHERE emp.deptno=109 AND emp.`ename`='AvDEjl';
总结一下:
char(30) utf8 --> key_len = 30*3 +1 表示 utf8 格式需要 *3 (跟数据类型有关)
允许为 NULL +1 ,不允许 +0
动态类型 +2 (动态类型包括 : varchar , detail text() 截取字符窜)
key_len=deptno(int)+null + ename(varchar(20)*3+动态 =4+1+20*3+2= 67
key_len字段能够帮你检查是否充分的利用上了索引。
ref:显示索引的哪一列被使用了,如果可能的话,是一个常数。哪些列或常量被用于查找索引列上的值。
rows:显示MySQL认为它执行查询时必须检查的行数,越少越好。根据表统计信息及索引选用情况,大致估算出找到所需的记录所需要的行数。
Extra:包含不适合在其他列中显示但十分重要的额外信息。
- Using filesort
说明mysql会对数据使用一个外部的索引排序,而不是按照表内的索引顺序进行读取。MySQL中无法利用索引完成的排序操作称为“文件排序”。 - 查询中排序的字段,排序字段若通过索引去访问将大大提高排序速度。
分情况:当通过前面的查询语句 筛选大部分条件后,只剩下很少的数据。using filesort 性能影响不大,需要综合考虑。 - Using temporary
使用临时表保存中间结果,MySQL在对查询结果排序时使用临时表。常见于排序 order by 和分组查询 group by。 - USING index
表示相应的select操作中使用了覆盖索引(Covering Index),避免访问了表的数据行,效率不错!
如果同时出现using where,表明索引被用来执行索引键值的查找;
如果没有同时出现using where,表明索引只是用来读取数据而非利用索引执行查找。 - 覆盖索引(Covering Index):
- using index condition: 查询条件中虽然出现了索引列,但是有部分条件无法使用索引,会根据能用索引的条件先搜索一遍再匹配无法使用索引的条件。
Using where:表明使用了where过滤
using join buffer:使用了连接缓存。出现在当两个连接时驱动表(被连接的表,left join 左边的表。inner join 中数据少的表) 没有索引的情况下。给驱动表建立索引可解决此问题。且 type 将改变成 ref。
impossible where:where子句的值总是false,不能用来获取任何元组。
select tables optimized away:在没有GROUP BY子句的情况下,基于索引优化MIN/MAX操作或者对于MyISAM存储引擎优化COUNT(*)操作,不必等到执行阶段再进行计算,查询执行计划生成的阶段即完成优化。
myisam 中会维护 总行数 (还有其他参数)这个参数,所以在执行查询时不会进行全表扫描。而是直接读取这个数。
但会对增删产生一定的影响。根据业务情况决定谁好谁坏
innodb 中没有这个机制。
distinct:优化distinct操作,在找到第一匹配的元组后即停止找同样值
三. 热身case