CentOS 7 MySQL5.6分库分表-全备-shell脚本

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了CentOS 7 MySQL5.6分库分表-全备-shell脚本相关的知识,希望对你有一定的参考价值。


#改改变量就可以了使用,所以输出信息自动生成mysql_backup.log日志,可查看脚本备份的时间,


CentOS 7 MySQL自动备份shell脚本

系统环境:

CentOS7 64位 

MySQL-5.6


原理与工具:

shell脚本

mysqldump程序

crontab命令


1、新建shell脚本

vi /script/mysql_backup.sh


#!/bin/bash

#

# MySQL Backup Script

# Author: Rui.Xu

# Time: 07/2018

#

clear

mkdir -p /script

echo " "   >> /script/mysql_backup.log

echo "------------------------------------------------------------"  >> /script/mysql_backup.log

echo date: $(date)  >> /script/mysql_backup.log

echo user: $(whoami)  >> /script/mysql_backup.log



#记录脚本开始时间

shi=`date +%H:%M:%S:%N | awk -F':' '{print $1}'`  

fen=`date +%H:%M:%S:%N | awk -F':' '{print $2}'`  

miao=`date +%H:%M:%S:%N | awk -F':' '{print $3}'`  

haomiao=`date +%H:%M:%S:%N | awk -F':' '{print $4}'` 


# 以下配置信息请自己修改

mysql_user="root" #MySQL备份用户

mysql_password="amunlinux" #MySQL备份用户的密码

mysql_host="localhost"

mysql_port="3306"

mysql_charset="utf8" #MySQL编码

backup_db_arr=("Rui_Xu" "amun" "linux" "amunlinux") #要备份的数据库名称,多个用空格分开隔开 如("db1" "db2" "db3")

backup_location=/home/MySQL_backup/MySQL  #备份数据存放位置,末尾请不要带"/",此项可以保持默认,程序会自动创建文件夹

expire_backup_delete="ON" #是否开启过期备份删除 ON为开启 OFF为关闭

expire_days=3 #过期时间天数 默认为三天,此项只有在expire_backup_delete开启时有效


# 本行开始以下不需要修改

backup_time=`date +%Y-%m-%d-%H:%M`  #定义备份详细时间

backup_Ymd=`date +%Y-%m-%d` #定义备份目录中的年月日时间

backup_3ago=`date -d '3 days ago' +%Y-%m-%d` #3天之前的日期

backup_dir=$backup_location/$backup_Ymd  #备份文件夹全路径

welcome_msg="Welcome to use MySQL backup tools!" #欢迎语


# 判断MYSQL是否启动,mysql没有启动则备份退出

mysql_ps=`ps -ef |grep mysql |wc -l`

mysql_listen=`netstat -an |grep LISTEN |grep $mysql_port|wc -l`

if [ [$mysql_ps == 0] -o [$mysql_listen == 0] ]; then

        echo "ERROR:MySQL is not running! backup stop!"  >> /script/mysql_backup.log

        exit

else

        echo $welcome_msg  >> /script/mysql_backup.log

fi


# 连接到mysql数据库,无法连接则备份退出

mysql -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password <<end

use mysql;

select host,user from user where user='root' and host='localhost';

exit

end



flag=`echo $?`

if [ $flag != "0" ]; then

        echo "ERROR:Can't connect mysql server! backup stop!"  >> /script/mysql_backup.log

        exit

else

        echo "MySQL connect ok! Please wait......"  >> /script/mysql_backup.log

        # 判断有没有定义备份的数据库,如果定义则开始备份,否则退出备份

        if [ "$backup_db_arr" != "" ];then

                #dbnames=$(cut -d ',' -f1-5 $backup_database)

                #echo "arr is (${backup_db_arr[@]})"

                for dbname in ${backup_db_arr[@]}

                do

                        echo "database $dbname backup start..."  >> /script/mysql_backup.log

                        `mkdir -p $backup_dir`

                        `mysqldump -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password $dbname --default-character-set=$mysql_charset | gzip > $backup_dir/$dbname-$backup_time.sql.gz`

                        flag=`echo $?`

                        if [ $flag == "0" ];then

                                echo "database $dbname success backup to $backup_dir/$dbname-$backup_time.sql.gz"  >> /script/mysql_backup.log

                        else

                                echo "database $dbname backup fail!"  >> /script/mysql_backup.log

                        fi

                        

                done

        else

                echo "ERROR:No database to backup! backup stop"  >> /script/mysql_backup.log

                exit

        fi

        # 如果开启了删除过期备份,则进行删除操作

        if [ "$expire_backup_delete" == "ON" -a  "$backup_location" != "" ];then

                 #`find $backup_location/ -type d -o -type f -ctime +$expire_days -exec rm -rf {} ;`

                 `find $backup_location/ -type d -mtime +$expire_days | xargs rm -rf`

                 echo "Expired backup data delete complete!"  >> /script/mysql_backup.log

        fi

        echo "All database backup success! Thank you!"  >> /script/mysql_backup.log

tar -zcvP -f /mnt/mysql-ALL-$backup_Ymd.tar.gz  $backup_dir  >> /script/mysql_backup.log

scp /mnt/mysql-ALL-$backup_Ymd.tar.gz  [email protected]:/home/MySQL_full_backup/  >> /script/mysql_backup.log

rm -fr /mnt/mysql-ALL-$backup_Ymd.tar.gz


#记录结束时间

shi1=`date +%H:%M:%S:%N | awk -F':' '{print $1}'`

fen2=`date +%H:%M:%S:%N | awk -F':' '{print $2}'`

miao3=`date +%H:%M:%S:%N | awk -F':' '{print $3}'`

haomiao4=`date +%H:%M:%S:%N | awk -F':' '{print $4}'`

H=`expr $shi1 - $shi`

F=`expr $fen2 - $fen`

M=`expr $miao3 - $miao`

HM=`expr $haomiao4 - $haomiao`

echo " " >> /script/mysql_backup.log

echo "Elapsed time :"$H" h "$F" m "$M" s "$HM" ms"   >> /script/mysql_backup.log

echo " " >> /script/mysql_backup.log


       exit


fi





注意:如果这个sh文件是在win下编辑的,需要用编辑器转换为unix格式,否则sh会执行不成功,如图:



2、修改shell脚本属性,赋予执行权限

chmod 600 /opt/mysqlBackup.sh

chmod +x /opt/mysqlBackup.sh

3、定时执行脚本

方式一:

执行crontab -e命令


crontab -e

输入以下内容,设置每天凌晨3:00定时自动备份


00 03 * * * /root/mysqlBackup.sh

方式二:

打开自动执行文件


vi /etc/crontab


在etc中加入如下内容,让其每天凌晨3:00自动执行任务。


00 03 * * * /root/mysqlBackup.sh

crontab文件概要:

用户所建立的crontab文件中,每一行都代表一项任务,每行的每个字段代表一项设置,它的格式共分为六个字段,前五段是时间设定段,第六段是要执行的命令段,格式如下:

minute hour day month week command

 分  时  日  月   周   命令

其中:

minute: 表示分钟,可以是从0到59之间的任何整数。(每分钟可用*或者*/1表示)

hour:表示小时,可以是从0到23之间的任何整数。(0表示0点)

day:表示日期,可以是从1到31之间的任何整数。

month:表示月份,可以是从1到12之间的任何整数。

week:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。

command:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件。

在以上各个字段中,还可以使用以下特殊字符:

星号(*):代表所有可能的值,例如month字段如果是星号,则表示在满足其它字段的制约条件后每月都执行该命令操作。

逗号(,):可以用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”

中杠(-):可以用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”

正斜线(/):可以用正斜线指定时间的间隔频率,例如“0-23/2”表示每两小时执行一次。同时正斜线可以和星号一起使用,例如*/10,如果用在minute字段,表示每十分钟执行一次。


crontab 定时执行的日志记录在/var/spool/mail/root中,可查看日志记录


vi /var/spool/mail/root


4、MySQL恢复

gunzip < amun-2018-07-25-17:06.sql.gz | mysql -uroot -pamunlinux amun






以上是关于CentOS 7 MySQL5.6分库分表-全备-shell脚本的主要内容,如果未能解决你的问题,请参考以下文章

MySQL分库分表

170123数据库分库分表策略的具体实现方案

mysql 5.7多源复制(用于生产库多主库合并到一个查询从库)

分库分表和一致性hash

什么是分库分表?ShardingSphere解决方案

数据库分库分表