佬技术总监,是这样优化产线MySQL数据库配置的

Posted 梦想橡皮擦

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了佬技术总监,是这样优化产线MySQL数据库配置的相关的知识,希望对你有一定的参考价值。

⛳️ 实战场景

很多时候,当我们在服务器端安装 mysql 软件之后,就会立马进行数据表结构的创建,表数据的填充,但其实我们可以提前对 MySQL 配置文件进行一些修改,从而让其效率达到最优。

典型的一些配置调整。

⛳️ 查询缓存

当数据库查询使用比较频繁的时候,开启该命令。

query_cache_size/query_cache_type

查询缓存,建议关闭,即设置为

query_cache_size = 256M
query_cache_type = 1

可以使用如下命令查询缓存状态是否开启

show VARIABLES like "query_cache%";

如果查询到 query_cache_typeOFF ,表示未开启缓存,其余参数说明如下所示:

  • query_cache_limit:缓存大小限制,超过不缓存,缺省值为 1M,可以设置为 2M;
  • query_cache_min_res_unit:缓存块大小,默认 4KB;
  • query_cache_size:查询缓存大小,需要设置为 1024 的倍数,单位为字节;
  • query_cache_type:缓存类型,0 为不设置,1 为缓存所有结果,2 为缓存 select 语句中通过 SQL_CACHE 指定的缓存。

禁止查询缓存的方法是直接注释 query_cache_limit 即可。

⛳️ 各种缓存

sort_buffer_size

可以设置为

sort_buffer_size = 4M

查询排序时可使用的缓冲区大小,该参数对应的分配内存是单连接独占,只对 order by 和 group by 起作用,如果有 10 个连接,实际分配的内存是 10x4M = 10M,对于 4GB 内存的服务器,可以设置为 4~8M。

与该参数对应的两个参数是 read_buffer_sizejoin_buffer_size ,分别表示读查询缓冲区大小,联合查询缓冲区大小。

key_buffer_size

索引的缓冲区大小,根据服务器内存进行配置,一般占用实际内存的 10%左右即可。

max_allowed_packet

网络传输中消息的最大值,默认为 1M,最大值是 1024M,必须是 1024 的倍数。

⛳️ Innodb 缓存及其相关

innodb_buffer_pool_size

缓冲池大小,当使用 InnoDB 之后应该设置的选项,该值原则上越大越好,一般设置内存总量的 70%~80%大小。

设置格式如下所示,注意单位。

innodb_buffer_pool_size = 10G

innodb_log_file_size

redo 日志的大小,重写日志用于确保写操作崩溃时的快速恢复,以 M 为单位,提高该值也能提高效率。

 innodb_log_file_size = 128M

innodb_lock_wait_timeout

默认为 50 ,修改为 30

innodb_lock_wait_timeout = 30

innodb_lock_wait_timeout

MySQL 事务超时时间,默认时间为 50S,当数据库锁超过这个值就会报错。

⛳️ 连接数

max_connections

MySQL 最大连接数,当服务器并发量比较大的时候,会返回 too many connections 错误时,可以调整该值进行处理,该值默认值为 100,你可以设置为更高的值。

设置的时候,可以参考产线环境,在操作库上执行下述代码。

show variables like %max_connections%;
show status like %max_used_connections%;

对比得到的结果集,如果 max_used_connections = max_connections ,即调高 max_connections

如果 max_used_connections 远远小于 max_connections ,则调低该值。

该内容还会衍生出一个配置,即暂存链接数 back_log 。该值表示的是 MySQL 暂停新请求之前,短时间内可以寄存的请求数,一般设置为 100~200 即可。

⛳️ 时间

wait_timeout 和 interactive_timeout

wait_timeout 表示 MySQL 关闭非交互的连接之前的等待秒数;
interactive_timeout 表示 MySQL 关闭交互连接之前要等待的秒数。

interactive_timeout 默认值是 28800,可以优化到 6000(即 100 分钟), wait_timeout 酌情进行处理即可。

show variables like "wait_timeout";
show variables like "interactive_timeout";

常用的配置如下:
日志格式与路径

binlog_format = row
log_bin = /data/mysql/data/mysql-bin # 电脑路径
log-error = /data/mysql/data/error.log # 电脑路径

表名忽略大小写

lower_case_table_name = 1

慢日志相关

slow_query_log = 1 # 开启慢日志
slow_query_log_file = /data/mysql/data/slow-query.log # 慢日志地址
long_query_time = 3 # 慢日志记录时间

连接数配置

max_connections = 1024 # 最大连接数
back_log = 500 # 暂存连接数
max_connect_errors = 20 # 最大错误连接数

超时配置

wait_timeout = 60 # 非交互的连接
interactive_timeout = 6000 # 交互的连接

缓存相关配置

key_buffer_size=256M # 索引缓存区大小
query_cache_size = 256M # 查询索引大小
query_cache_type=1 # 缓存存储类型
query_cache_limit=50M # 缓存大小限制

sort_buffer_size = 2M
join_buffer_size = 2M
max_allowed_packet=32M # 额外分配内存
thread_cache_size=200 # 线程缓存大小

read_buffer_size=1M # 读取缓存大小
read_rnd_buffer_size=16M # 随机缓存区大小
bulk_insert_buffer_size=64M # 批量插入

innodb 缓冲区配置

# 缓存innodb表的索引,数据,插入数据时的缓冲总大小
innodb_buffer_pool_size = 10G
innodb_flush_log_at_trx_commit = 2 # 事务提交日志参数

innodb_log_buffer_size = 32M # 日志缓冲区大小
# 重做日志大小,用于 MySQL 崩溃时的重做恢复
innodb_log_file_size = 128M
# 日志组,默认为 2
innodb_log_files_in_group = 2

以上是关于佬技术总监,是这样优化产线MySQL数据库配置的的主要内容,如果未能解决你的问题,请参考以下文章

mysql服务性能优化—my.cnf配置说明详解

前技术总监优化tomcat的建议,派上用场了

SaaS 电商ERP - 技术总监(C#)

[转]MySQL5.5 my.cnf配置参考

又一场大咖直播分享会 | MySQL的查询与优化

生产线平衡如何改善?详解:生产线平衡优化改善方法与措施!