Mysql常用日志类型及场景。

Posted 2021-03-22 白菜叶叶

日志相关的常见问题：

1、mysql常用日志有哪些？我们在什么情况下使用这些日志？

2、如何通过日志类审计用户活动？ 通过插件实现，mysql GPL版没有审计日志。percona mysql有审计日志功能。

---

（1）常用日志类型

• 错误日志（error-log）:记录mysql在启动、运行和停止时出现的问题诊断分析。
• 常规日志（general_log）:记录所有mysql客户端发向mysql服务器的请求。包括连接请求、数据库操作请求以及一些管理命令，无论请求是否成功都会记录在这个日志中，可想如果是一个繁忙的业务系统场景，这个日志会很大，所以开启这个日志会对数据库服务器性能会有一定的影响，在业务系统中用完一定要记得关掉和清理这个日志中的内容。
• 慢查询日志(slow_query_log):记录符合条件的查询。
• 二进制日志（binary_log）:记录全部有效的数据修改日志。
• 中继日志（relay_log）:用于主从复制，临时存储从主库同步的二进制日志。

（2）各种日志的配置和使用场景

　　①错误日志（error-log）：a.分析排查mysql运行错误；b.记录未经授权的访问。

　　log_error=$mysql/sql_log/mysql-error.log
　　log_error_verbosity=[1,2,3]   5.7新增  错误日志中记录错误信息的级别;
>select @@log_error_verbosity；
注释：
1：Error messages
2:Error and warning messages
3:Error,waring and note message

　　log_error_services=[日志服务组件；日志服务组件] 8.0新增  

常用错误日志的服务组件：

log_filter_internal: 默认的日志过滤组件，依赖log_error_verbosity
log_sink_internal:   默认的日志输出组件，依赖log_error
log_sink_json:       将错误日志输出到json文件
log_sink_syseventlog:将错误日志输出到系统日志文件

　　log_timestamps： 这个参数主要是控制 error log、slow_log、genera log，等等记录日志的显示时间参数，但不会影响 general log 和 slow log 写到表 (mysql.general_log, mysql.slow_log) 中的显示时间，该参数全局有效，可以被设置的值有：UTC 和 SYSTEM，默认使用 UTC。它还支持动态设置，不过建议大家在配置文件中就写上，以免重启之后造成不必要的麻烦。

>select @@log_timestamps；
>set GLOBAL log_timestamps = SYSTEM

　　②常规日志（general_log）： 分析客户端发送到mysql的实际请求

general_log = [ON|OFF]/[1/0]
general_log_file = $mysql/sql_log/general.log
log_output = [file|table|none]
show variables like ‘general_log‘;

　　③慢查日志(slow_query_log)：a.将执行成功并符合条件的查询记录到日志中,b.找到需要优化的sql.

slow_query_log=[on|off]
slow_query_log_file=$mysql/sql_log/slowlog.log
long_query_time=XX秒 （可以精确到微秒）查询超过这个值才会被记录到slowlog中，互联网行业中一般设置0.001s比较合适。
set global long_query_time=0.001. 只对新建立的连接起作用。设置为0 是记录所有sql.
log_queries_not_using_indexes=[on|off]
log_slow_admin_statements=[on|off].设置为on时将会记录管理类命令比如create drop等。
log_slow_slave_statements=[on|off] 。前提要开启binlog.

 　　④二进制日志（binary_log）：a.记录所有对数据库中数据的修改;b.基于时间点的备份和恢复;c.高可用架构的基础-主从复制

常用配置参数：
log_bin =  [base_name]  静态参数 只能在my.cnf中配置 重启服务后生效。 5.7之前一般不会启用这个参数。
binlog_format = [row/statement/mixed] 动态参数。 5.7之后默认row 主从复制中安全性比较高
binlog_row_image = [full/minimal/noblob]  minimal 只会记录被修改的值，noblob会记录除blob外的所有修改前修改后的值。full没修改的列对应值也会记录。
set session binlog_row_image = ‘minimal‘;
binlog_rows_query_log_events = [on|off]  会同时记录执行的sql语句
log_slave_updates = [on|off]   默认情况下slave不会记录同步主库过来的binlog日志，有些情况比如级联复制  slave是另一个mysql实例的主，还有需要gtid复制。都需要记录从主从同步过来的binlog日志。
sync_binlog = [1|0]  控制如何刷新二进制日志到磁盘，mysql每写一次二进制日志都会向磁盘刷新一次。
二进制日志的清除:

expire_logs_days = days  动态参数

purge binary logs to ‘mysql-bin.010‘ 将指定日志前的二进制日志都删除。

purge binary logs before ‘yyyy-mm-dd hh24:mi:ss‘;删除指定日期前的日志。

　　⑤中继日志（relay_log）：

relay_log = filename  指定relay log存放位置和名称。
relay_log_purge = [on|off]   自动清理