MySQL监控

Posted 2020-10-24 zhchoutai

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了MySQL监控相关的知识，希望对你有一定的参考价值。

mysql可用性监控

MySQL服务存活监控
MySQL复制是否终止，延迟多大
其它，比如磁盘空间消耗

MySQL性能监控

每秒活跃DML数/事务数/请求数/当前并发连接/平均响应时长
数据库吞吐量（收、发字节数）
锁：表锁，行锁。锁等待。死锁
内存：buffer/cache命中率、等待释放
事务：事务ID增长率，unpurged历史事务
慢查询：平均耗时。平均次数

查看MySQL连接数、当前并发连接、最大连接。

mysql> show status like ‘Threads%‘;
+-------------------+-------+
| Variable_name     | Value |
+-------------------+-------+
| Threads_cached    | 58    |
| Threads_connected | 57    |   ###这个数值指的是打开的连接数
| Threads_created   | 3676  |
| Threads_running   | 4     |   ###这个数值指的是激活的连接数，这个数值一般远低于connected数值
+-------------------+-------+

Threads_connected 跟show processlist结果同样，表示当前连接数。准确的来说，Threads_running是代表当前并发数

这是是查询数据库当前设置的最大连接数
mysql> show variables like ‘%max_connections%‘;
+-----------------+-------+
| Variable_name   | Value |
+-----------------+-------+
| max_connections | 1000  |
+-----------------+-------+

假设我们在MySQLserver配置文件里设置了thread_cache_size，当客户端断开之后，server处理此客户的线程将会缓存起来以响应下一个客户而不是销毁(前提是缓存数未达上限)。
Threads_created表示创建过的线程数。假设发现Threads_created值过大的话，表明MySQLserver一直在创建线程，这也是比較耗资源。能够适当添加配置文件里thread_cache_size值。查询server
thread_cache_size配置：

1mysql> show variables like ‘thread_cache_size‘;
 +-------------------+-------+
 | Variable_name | Value |
 +-------------------+-------+
 | thread_cache_size | 64 |
 +-------------------+-------+

show processlist; 能够显示前100条连接信息
show full processlist; 能够显示所有。
顺便说下，假设用普通账号登录，就仅仅显示这用户的。

锁等待

"[email protected]:mysql.sock  [(none)]>show status like ‘Innodb_row_lock%‘;
+-------------------------------+-------+
| Variable_name                 | Value |
+-------------------------------+-------+
| Innodb_row_lock_current_waits | 0     |
| Innodb_row_lock_time          | 0     |
| Innodb_row_lock_time_avg      | 0     |
| Innodb_row_lock_time_max      | 0     |
| Innodb_row_lock_waits         | 0     |
+-------------------------------+-------+

Innodb_row_lock_current_waits：当前等待的待锁定的数目（锁的数量，不是锁定的行的数量）。
Innodb_row_lock_waits：一行锁定必须等待的总时长
Table_locks_waited：表锁等待次数

死锁的话，须要找到两条SQL所在的事务。否则基本上无法排查出为什么会有死锁。偶尔有死锁能够，仅仅要不是太频繁。

更关键的是当前行锁发生的次数，以及当前行锁等待发生的次数。

buffer/cache命中率一般99%以上。
更重要的是看内存够不够用。

怎么看内存够不够用呢？看内存等待释放的指标是不是大于0。Innodb_buffer_pool_wait_free。

查看innodb buffer pool实时状态信息：
mysql> show status like ‘Innodb_buffer_pool_%‘;
+-----------------------------------------+---------------+
| Variable_name                           | Value         |
+-----------------------------------------+---------------+
| Innodb_buffer_pool_pages_data           | 999020        | 
| Innodb_buffer_pool_pages_dirty          | 47643         | 
| Innodb_buffer_pool_pages_flushed        | 474668167     | 
| Innodb_buffer_pool_pages_LRU_flushed    | 365125        | 
| Innodb_buffer_pool_pages_free           | 0             | 
| Innodb_buffer_pool_pages_made_not_young | 0             | 
| Innodb_buffer_pool_pages_made_young     | 203410903     | 
| Innodb_buffer_pool_pages_misc           | 49552         | 
| Innodb_buffer_pool_pages_old            | 368697        | 
| Innodb_buffer_pool_pages_total          | 1048572       | 
| Innodb_buffer_pool_read_ahead_rnd       | 0             | 
| Innodb_buffer_pool_read_ahead           | 66348855      | 
| Innodb_buffer_pool_read_ahead_evicted   | 3716819       | 
| Innodb_buffer_pool_read_requests        | 3215992991498 | 
| Innodb_buffer_pool_reads                | 65634998      | 
| Innodb_buffer_pool_wait_free            | 651           | 
| Innodb_buffer_pool_write_requests       | 21900970785   | 
+-----------------------------------------+---------------+

事务看事务的增长频率，如每秒增长1000。则TPS就是1000。
另外就是看unpurge，undo的情况，避免由于事务长时间未提交导致大量的undo。unpurge。

慢日志要常常分析。

看TPS有几种方法：
1、(Handler_commit_d + Handler_rollback_d)/Uptime_d
2、innodb max trx id增长率

几个wait
Innodb_buffer_pool_wait_free：表示当前buffer pool不够用了。须要其它buffer释放。会产生等待事件。
Innodb_log_waits：表示当前redo log不够用了。

查看MySQL状态（总体状态）

show [full] processlist
show [global] status
show engine innodb status\G
tail -f slow.log

show [full] processlist：MySQL当前线程运行状态

MySQL锁监控

表级锁
- Table_locks_immediate
- Table_locks_waited
行级锁
- innodb_row_lock_current_waits 当前等待的行锁数量（不是行的数量。是锁的数量）
- innodb_row_lock_time 请求行锁总耗时（ms）
- innodb_row_lock_time_avg 请求行锁平均耗时（ms）
- innodb_row_lock_time_max 请求行锁最旧耗时（ms）
- innodb_row_lock_waits 行锁发生次数

查看processlist。假设状态为copying to temp table。代表没有索引。
还有看processlist的运行时间，长的话要注意。

看SQL的运行代价：

mysql > flush status;
mysql > select ...;
mysql > show status llike ‘handler_read%‘

看handler_read_rnd
看handler_read_rnd

看SQL的瓶颈在哪里：（用profiling）

mysql > set profiling=1;
mysql > select ...;
mysql > show profiles;
mysql > show profile for query N;

innodb status

show engine innodb status
活跃事务。活跃了多少秒，多少个行锁，锁了多少行，产生多少undo。

slow log

percona分支版本号会添加一些额外的信息。

等待事件

innodb_buffer_pool_wait_free
innodb_log_waits等

暂时表/暂时文件

created_tmp_disk_tables
created_tmp_files

打开表/文件数

open_files
open_table_definitions
open_tables
Opened_files
Opened_table_definitions
Opened_tables

并发连接

thread_running
thread_created
thread_cached

业务监控

数据库正常，但业务不可用，一点意义都没有。

show global status关键參数解读

aborted_clients
由于客户端没有正确关闭导致客户端终止而中断的连接数。
aborted_connects
视图连接到MySQLserver而失败的连接数。
aborted_clients记录的是已经建立正常连接后又被异常断开的情形。而aborted_connects记录的是未能正常建立连接的情形。

假设aborted_clients非常高，可能是连接超时时间设置太短了。结果大量连接被自己主动关闭。
Binlog_cache_disk_use
使用二进制日志缓存但超过 binlog_cache_size 值并使用暂时文件来保存事务中的语句的事务数量。
原因是binlog cache设置的太小。
Binlog_cache_use
使用暂时二进制日志缓存的事务数量。

binlog hit ratio = (Binlog_cache_use)/( Binlog_cache_use + Binlog_cac he_disk_use)*100%

Binlog_stmt_cache_disk_use
The number of nontransaction statements that used the binary log statement cache but that exceeded the value of binlog_stmt_cache_size and used a temporary file to store those statements.
当非事务语句使用二进制日志缓存，可是超出 binlog_stmt_cache_size 时，使用一个暂时文件来存放这些语句。
（innodb的binlog存放在binlog cache中，非事务引擎的binlog存放在binlog_stmt_cache中）
Connections
试图连接到(无论是否成功)MySQL server的连接数。
Created_tmp_disk_tables
server运行语句时在硬盘上自己主动创建的暂时表的数量。是指在排序时。内存不够用(tmp_table_size 小于须要排序的结果集)，所以须要创建基于磁盘的暂时表进行排序。

created_tmp_disk_tables/(created_tmp_disk_tables + created_tmp_tables) *100% >10%的话，须要适当提高tmp_table_size的大小。可是不能设置太大。由于它是每一个session都会分配的，可能会导致OOM。
Handler_commit
内部提交语句数。
一次 update、delete 后，handler_commit 也是添加 2。一次 select 后，handler_commit 添加 1。
Handler_rollback
内部 ROLLBACK 语句的数量。
Handler_read_first
索引中第一条记录被读的次数。假设较高。它表明server正运行大量全索引扫 ; 比如，SELECT * order by id，假定 id 列有索引。
Handler_read_key
依据索引读一行的请求数。
假设较高，说明查询和表的索引正确。比如:select … where id = 1024;
Handler_read_last
查询读索引最后一个索引键的请求数。当使用 ORDER BY 时。server优先发出使用第一个索引的请求，之后顺序往后扫索引。当使用 ORDER BY DESC 时，服务器优先发出使用最后一个索引的请求，之后向前扫索引。
比如:select … order by id desc limit 10;
Handler_read_next
依照索引顺序读下一行的请求数。假设你用范围约束或假设运行索引扫来查询索引列，该值添加。
比如:select id from t where id &get;= 1024 order by id limit 5;
Handler_read_prev
依照索引顺序读前一行的请求数。该读方法主要用于优化 ORDER BY … DESC 比如:select id from t where id &get;= 1024 order by id DESC limit 5;
Handler_read_rnd
依据固定位置读一行的请求数。假设你正运行大量查询并须要对结果进行排序该值较高。说明可能使用了大量须要 MySQL 扫整个表的查询或没有正确使用索引。

比如:select * from t limit 1000,1;
或者:select * from t order by non_key_col limit 100,1;
Handler_read_rnd_next
在数据文件里读下一行的请求数。假设你正进行大量的表扫，该值会较高。通常说明你的表索引不对或写入的查询没有利用索引。
比如:select * from t order by non_key_col limit 100;
Innodb_buffer_pool_wait_free
普通情况，通过后台向 Innodb buffer pool 写。可是。假设须要读或创建页，而且没有干净的页可用。则它还须要先等待页面清空。
该计数器对等待实例进行记数。
假设已经适当设置 Innodb buffer pool 大小。该值应小。
Innodb_log_waits
我们必须等待的时间，由于日志缓冲区太小，我们在继续前必须先等待对它清空。
Innodb_row_lock_current_waits
当前等待的待锁定的行数。
Innodb_row_lock_time
行锁定花费的总时间，单位毫秒。
Innodb_row_lock_time_avg
行锁定的平均时间，单位毫秒。
Innodb_row_lock_time_max
行锁定的最长时间。单位毫秒。这个值太大的话。能够考虑调低 innodb_lock_wait_timeout 值
Innodb_row_lock_waits
行锁发生次数。
Open_table_definitions
The number of cached .frm files. 被缓存的.frm 文件数量。
Opened_table_definitions
The number of .frm files that have been cached. 被缓存过的.FRM 文件的数量。这个值假设远大于Open_table_definitions，说明说明table definition cache不够用。
Open_tables
当前打开的表的数量
Opened_tables
已经打开的表的数量。假设 Opened_tables 较大。table_open_cache 值可能太小。
这个值假设远大于Open_tables，说明说明table open cache不够用。
Queries
已经发送给server的查询的个数。
Questions
发送到server的请求次数（包括正常SQL查询。以及连接、set等所有请求。

 QPS  = Questions_d / Uptime_d

Select_full_join
没有使用索引的联接的数量。
假设该值不为 0,你应细致检查表的索引。
Select_scan
对第一个表进行全然扫的联接的数量。
Slow_queries
查询时间超过 long_query_time 秒的查询的个数
Sort_merge_passes
排序算法已经运行的合并的数量。假设这个变量值较大，应考虑添加 sort_buffer_size 系统变量的值。
threads_connected
当前打开的连接的数量
threads_created
创建用来处理连接的线程数。
假设threads_created较大，你可能要添加threads_cache_size值。

缓存訪问率的计算方法：
threads_creates/Connections
threads_running
激活的（非睡眠状态）线程数
Threads_connected 假设比 Threads_created 小非常多。或者Threads_cached 和 *Threads_created 相比小非常多。那就须要加大 thread cache size。

innodb status解读

查看锁信息
—–5.7版本号
select * from sys.innodb_lock_waits\G

—–5.6版本号
information_schema以下的
innodb_trx
innodb_locks
innodb_lock_waits

SELECT lw.requesting_trx_id     AS request_ID,
       trx.trx_mysql_thread_id  as request_mysql_ID,
       trx.trx_query            AS request_command,
       lw.blocking_trx_id       AS blocking_ID,
       trx1.trx_mysql_thread_id as blocking_mysql_ID,
       trx1.trx_query           AS blocking_command,
       lo.lock_index            AS lock_index
  FROM information_schema.innodb_lock_waits lw
 INNER JOIN information_schema.innodb_locks lo
    ON lw.requesting_trx_id = lo.lock_trx_id
 INNER JOIN information_schema.innodb_locks lo1
    ON lw.blocking_trx_id = lo1.lock_trx_id
 INNER JOIN information_schema.innodb_trx trx
    ON lo.lock_trx_id = trx.trx_id
 INNER JOIN information_schema.innodb_trx trx1
    ON lo1.lock_trx_id = trx1.trx_id;