mysql慢查询日志分析

大访问量的情况下,可添加节点或改变架构可有效的缓解数据库压力,不过一切的原点,都是从单台mysql开始的,下面总结一些使用过或者研究过的经验,从配置以及调节索引的方面入手,对mysql进行一些优化.

第一步应该做的就是排查问题,找出瓶颈,所以,先从日志入手.

开启慢查询日志:mysql>show variables like "%slow%";

查看慢查询配置,没有则在my.cnf中添加,如下:

1. log-slow-queries=/data/mysqldata/slowquery.log#日志目录
2. long_query_time=1#记录下查询时间查过1秒
3. log-queries-not-using-indexes#表示记录下没有使用索引的查询

分析日志–mysqldumpslow

分析日志,可用mysql提供的mysqldumpslow,使用很简单,参数可–help查看.

# -s:排序方式,c,t,l,r 表示记录次数、时间、查询时间的多少、返回的记录数排序；

# ac,at,al,ar 表示相应的倒叙；

# -t：返回前面多少条的数据；

# -g：包含什么,大小写不敏感的；

使用实例:

mysqldumpslow -s r -t 10 /slowquery.log #slow记录最多的10个语句

mysqldumpslow -s t -t 10 -g "left join" /slowquery.log #按照时间排序前10中含有"left join"的

mysql日志分析工具–mysqlsla

mysqlsla下载安装:

1. wgethttp://hackmysql.com/scripts/mysqlsla-2.03.tar.gz
2. tarzvxfmysqlsla-2.03.tar.gz
3. cdmysqlsla-2.03
4. perlMakefile.PL
5. make
6. makeinstall
7. mysqlsla/data/mysqldata/slow.log

使用实例:

mysqlsla /data/mysqldata/slow.log

# mysqlsla会自动判断日志类型,为了方便可以建立一个配置文件”~/.mysqlsla”.

# 在文件里写上:top=100,这样会打印出前100条结果.

mysqlsla命令参数说明:

hackmysql.com推出的一款MySQL的日志分析工具.

mysql有一个功能就是可以log下来运行的比较慢的sql语句，默认是没有这个log的，为了开启这个功能，要修改my.cnf或者在mysql 启动的时候加入一些参数。

如果在my.cnf里面修改,需增加如下几行:

long_query_time = 10

log-slow-queries =

long_query_time 是指执行超过多久的sql会被log下来，这里是10秒。

log-slow-queries 设置把日志 写在那里，为空的时候，系统会给慢查询 日志赋予主机名，并被附加slow.log 如果设置了参数log-long-format，那么所有没有使用索引的查询也将被记录。在文件my.cnf或my.ini中加入下面这一行可以记录这些查询 这是一个有用的日志。它对于性能的影响不大（假设所有查询都很快），并且强调了那些最需要注意的查询（丢失了索引或索引没有得到最佳应用）

# Time: 070927 8:08:52 # User@Host: root[root] @ [192.168.0.20] # Query_time: 372 Lock_time: 136 Rows_sent: 152 Rows_examined: 263630select id, name from manager where id in (66,10135);

这是慢查询 日志中的一条,用了372秒，锁了136秒，返回152行，一共查了263630行.

如果日志内容很多,用眼睛一条一条去看会累死,mysql 自带了分析的工具,使用方法如下.

命令行下,进入mysql /bin 目录，输入mysqldumpslow –help 或--help 可以看到这个工具的参数,主要有:

1. Usage:mysqldumpslow[OPTS...][LOGS...]
2. ParseandsummarizetheMySQLslowquerylog.Optionsare
3. --verboseverbose
4. --debugdebug
5. --helpwritethistexttostandardoutput
6. -vverbose
7. -ddebug
8. -sORDERwhattosortby(t,at,l,al,r,aretc),'at'isdefault
9. -rreversethesortorder(largestlastinsteadoffirst)
10. -tNUMjustshowthetopnqueries
11. -adon'tabstractallnumberstoNandstringsto'S'
12. -nNUMabstractnumberswithatleastndigitswithinnames
13. -gPATTERNgrep:onlyconsiderstmtsthatincludethisstring
14. -hHOSTNAMEhostnameofdbserverfor*-slow.logfilename(canbewildcard),--phpfensi.com
15. defaultis'*',i.e.matchall
16. -iNAMEnameofserverinstance(ifusingmysql.serverstartupscrīpt)
17. -ldon'tsubtractlocktimefromtotaltime

-s,是order 的顺序,说明写的不够详细,俺用下来,包括看了代码,主要有c,t,l,r 和ac,at,al,ar,分别是按照query 次数,时间,lock 的时间和返回的记录数来排序,前面加了a 的时倒叙.

-t,是top n 的意思,即为返回前面多少条的数据.

-g,后边可以写一个正则匹配模式,大小写不敏感的.

mysqldumpslow -s c -t 20 host-slow.log

mysqldumpslow -s r -t 20 host-slow.log

上述命令可以看出访问次数最多的20 个sql 语句和返回记录集最多的20 个sql.

mysqldumpslow -t 10 -s t -g “left join” host-slow.log.

这个是按照时间返回前10 条里面含有左连接的sql 语句.

整体来说,功能非常强大,数据报表,非常有利于分析慢查询的原因,包括执行频率,数据量,查询消耗等.

格式说明如下:总查询次数 (queries total), 去重后的sql数量 (unique)

输出报表的内容排序(sorted by),最重大的慢sql统计信息,包括 平均执行时间,等待锁时间,结果行的总数,扫描的行总数.

Count,sql的执行次数及占总的slow log数量的百分比.

Time,执行时间,包括总时间,平均时间,最小,最大时间,时间占到总慢sql时间的百分比.

95% of Time,去除最快和最慢的sql, 覆盖率占95%的sql的执行时间.

Lock Time,等待锁的时间.

95% of Lock,95%的慢sql等待锁时间.

Rows sent,结果行统计数量, 包括平均, 最小, 最大数量.

Rows examined,扫描的行数量.

Database,属于哪个数据库

Users,哪个用户,IP, 占到所有用户执行的sql百分比

Query abstract,抽象后的sql语句

Query sample,sql语句

除了以上的输出,官方还提供了很多定制化参数,是一款不可多得的好工具.