MySQL高级 之 查询日志分析

Posted 2022-12-15 走慢一点点

慢查询日志

mysql的慢查询日志是MySQL提供的一种日志记录，它用来记录在MySQL中相应时间超过阈值得语句，具体指运行时间超过long_query_time的SQL，则会被记录到慢查询日志中。

默认情况下：
1、long_query_time的值为10，即运行10秒以上的语句。
2、MySQL没有开启慢查询日志，需要我们手动来设置这个值。当然，如果不是调优需要的话，一般不建议开启，因为慢查询日志或多或少带来一定的性能影响。

查看是否开启及如何开启

show variables like '%slow_query_log%';

开启：

set global slow_query_log = 1;

如要要永久生效，就必须修改配置文件my.cnf，[mysqld]下增加或修改参数：

slow_query_log=1;
slow_query_log_file=/var/lib/mysql/wuseyukui-slow.log

什么样的SQL才会记录到慢查询日志？

这个是由参数long_query_time控制的，默认情况下long_query_time=10

 show variables like '%long_query_time%';

修改默认时间：

set global long_query_time = 3;

修改不会立即生效，需要重新连接或者新开一个会话才能看到效果

如要要永久生效，就必须修改配置文件my.cnf，[mysqld]下增加或修改参数：

long_query_time=3;
log_output=FILE

简单示例

查询当前系统有多少条慢查询记录

show global status like '%slow_queries%';

好用的日志分析工具

mysqldumpslow

mysqldumpslow是官方提供的perl脚本，所以你也不用费劲巴拉的安装了，只要有mysql的环境基本就能用。

主要功能是, 统计不同慢sql的
出现次数(Count),
执行最长时间(Time),
累计总耗费时间(Time),
等待锁的时间(Lock),
发送给客户端的行总数(Rows),
扫描的行总数(Rows),
用户以及sql语句本身(抽象了一下格式, 比如 limit 1, 20 用 limit N,N 表示).

mysqlsla

mysqlsla是 hackmysql.com推出的一款日志分析工具(该网站还维护了 mysqlreport, mysqlidxchk 等比较实用的mysql工具)
整体来说, 功能非常强大. 数据报表,非常有利于分析慢查询的原因, 包括执行频率, 数据量, 查询消耗等

安装方法如下：
tar zxf http://hackmysql.com/scripts/mysqlsla-2.03.tar.gz
cd mysqlsla-2.03
perl Makefile.PL
make
make install

使用起来很简单：
/path/to/mysqlsla slow.log

SHOW PROFILE详解

MySQL提供可以用来分析当前会话中语句执行的资源消耗情况，可以用于sql的调优测量

查看是否支持show profile 及开启

show variables like '%profiling%';

默认情况下，参数处于关闭状态，并保存最近15次的运行结果

开启：

set profiling = on;

SHOW PROFILE语法

语法

SHOW PROFILE [type [, type] ... ]
    [FOR QUERY n]
    [LIMIT row_count [OFFSET offset]]

type:
ALL 显示所有性能信息
BLOCK IO 显示块IO操作的次数
CONTEXT SWITCHES 显示上下文切换次数，不管是主动还是被动
CPU 显示用户CPU时间、系统CPU时间
IPC 显示发送和接收的消息数量
MEMORY [暂未实现]
PAGE FAULTS 显示页错误数量
SOURCE 显示源码中的函数名称与位置
SWAPS 显示SWAP的次数

示例

查看cpu、IO等信息

Status结果中需要注意的几个问题

converting HEAP to MyISAM
查询结果太大，内存不够用往磁盘拷贝了，解决方法之一：适当调整max_heap_table_size的值

Creating tmp table
创建了临时表（拷贝数据到临时表，用完再删除）

Copying to tmp table on disk
内存中的临时表拷贝到磁盘，解决方法之一：适当调整tmp_table_size的值

locked
锁表

全局查询日志

启用

配置启用：

#开启
general_log=1
#记录日志文件的路径
general_log_file=/path/logfile
#输出格式
log_output=FILE

示例