DRBD+mysql高可用

Posted 2020-10-12

 DRBD是一个用软件实现的、无共享的、服务器之间镜像块设备内容的存储复制解决方案。DRBD的功能是通过linux内核实现的，它是通过tcp/ip协议，和网卡通信保持数据同步的。

DRBD有三种协议：

    协议A：数据在本地完成写操作且数据已经发送到TCP/IP协议栈的队列中，则认为写操作完成。如果本地节点的写操作完成，此时本地节点发生故障，而数据还处在TCP/IP队列中，则数据不会发送到对端节点上。因此，两个节点的数据将不会保持一致。这种协议虽然高效，但是并不能保证数据的可靠性。

    协议B：数据在本地完成写操作且数据已到达对端节点则认为写操作完成。如果两个节点同时发生故障，即使数据到达对端节点，这种方式同样也会导致在对端节点和本地节点的数据不一致现象，也不具有可靠性。

    协议C：只有当本地节点的磁盘和对端节点的磁盘都完成了写操作，才认为写操作完成。这是集群流行的一种方式，应用也是最多的，这种方式虽然不高效，但是最可靠。

环境：

192.168.40.12 centosA

192.168.40.19 centosB

 

修改hosts文件保持两台服务器能互相通信，然后建立ssh互信：

[[email protected] ~]# ssh-keygen
[[email protected] ~]# ssh-copy-id centosB

设置时间同步：

[[email protected] ~]# crontab -l
*/5 * * * * /usr/sbin/ntpdatecn.pool.ntp.org
[[email protected] ~]# crontab -l
*/5 * * * * /usr/sbin/ntpdatecn.pool.ntp.org

安装DRBD：

[[email protected] ~]# rpm --importhttps://www.elrepo.org/RPM-GPG-KEY-elrepo.org
[[email protected] ~]# rpm -Uvhhttp://www.elrepo.org/elrepo-release-7.0-2.el7.elrepo.noarch.rpm
[[email protected] ~]# yum install -ykmod-drbd84 drbd84-utils

两个节点都安装。

修改配置文件：

[[email protected] ~]# cat/etc/drbd.d/global_common.conf
# DRBD is the result of over a decade ofdevelopment by LINBIT.
# In case you need professional servicesfor DRBD or have
# feature requests visithttp://www.linbit.com
 
global {
       usage-countno;  #是否参加DRBD使用统计，默认为yes。官方统计drbd的装机量
 
       #Decide what kind of udev symlinks you want for "implicit" volumes
       #(those without explicit volume <vnr> {} block, implied vnr=0):
       #/dev/drbd/by-resource/<resource>/<vnr>   (explicit volumes)
       #/dev/drbd/by-resource/<resource>        (default for implict)
       udev-always-use-vnr;# treat implicit the same as explicit volumes
 
       #minor-count dialog-refresh disable-ip-verification
       #cmd-timeout-short 5; cmd-timeout-medium 121; cmd-timeout-long 600;
}
 
common {
       protocol C;   #使用DRBD的同步协议
       handlers{
              #These are EXAMPLE handlers only.
              #They may have severe implications,
              #like hard resetting the node under certain circumstances.
              #Be careful when choosing your poison.
 
               pri-on-incon-degr"/usr/lib/drbd/notify-pri-on-incon-degr.sh;/usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ;reboot -f";
               pri-lost-after-sb"/usr/lib/drbd/notify-pri-lost-after-sb.sh;/usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ;reboot -f";
               local-io-error"/usr/lib/drbd/notify-io-error.sh;/usr/lib/drbd/notify-emergency-shutdown.sh; echo o > /proc/sysrq-trigger ;halt -f";
              #fence-peer "/usr/lib/drbd/crm-fence-peer.sh";
              #split-brain "/usr/lib/drbd/notify-split-brain.sh root";
              #out-of-sync "/usr/lib/drbd/notify-out-of-sync.sh root";
              #before-resync-target "/usr/lib/drbd/snapshot-resync-target-lvm.sh -p 15 ---c 16k";
              #after-resync-target /usr/lib/drbd/unsnapshot-resync-target-lvm.sh;
              #quorum-lost "/usr/lib/drbd/notify-quorum-lost.sh root";
       }
 
       startup{
              #wfc-timeout degr-wfc-timeout outdated-wfc-timeout wait-after-sb
       }
 
       options{
              #cpu-mask on-no-data-accessible
 
              #RECOMMENDED for three or more storage nodes with DRBD 9:
              #quorum majority;
              #on-no-quorum suspend-io | io-error;
       }
 
       disk{
              on-io-errordetach;   #配置I/O错误处理策略为分离
              #size on-io-error fencing disk-barrier disk-flushes
              #disk-drain md-flushes resync-rate resync-after al-extents
                # c-plan-ahead c-delay-targetc-fill-target c-max-rate
                # c-min-rate disk-timeout
       }
 
       net{
              #protocol timeout max-epoch-size max-buffers
              #connect-int ping-int sndbuf-size rcvbuf-size ko-count
              #allow-two-primaries cram-hmac-alg shared-secret after-sb-0pri
              #after-sb-1pri after-sb-2pri always-asbp rr-conflict
              #ping-timeout data-integrity-alg tcp-cork on-congestion
              #congestion-fill congestion-extents csums-alg verify-alg
              #use-rle
       }
       syncer{
           rate 1024M;   #设置主备节点同步时的网络速率
       }
}

创建配置文件：

[[email protected] ~]# cat /etc/drbd.d/mysql.res
resource mysql {    ##资源名称
protocol C;     ##使用的协议
meta-disk internal;
device /dev/drbd1;    ##DRBD设备名称
syncer {
verify-alg sha1;    ##加密算法
}
net {
allow-two-primaries;
}
on centosa {
disk /dev/sdb1;   ##drbd使用的磁盘分区
address 192.168.40.12:7789;    ##设置drbd监听地址与端口
}
on centosb {
disk /dev/sdb1;
address 192.168.40.19:7789;
}
}

将配置文件复制到对端节点：

[[email protected] ~]# scp -rp /etc/drbd.d/*centosb:/etc/drbd.d/

 

在centosa上启动：

[[email protected] ~]# drbdadm create-md mysql
initializing activity log
initializing bitmap (64 KB) to all zero
Writing meta data...
New drbd meta data block successfullycreated.

[[email protected] ~]# modprobe drbd

查看内核是否已加载了模块：

[[email protected] ~]# lsmod | grep drbd
drbd                  396875  0
libcrc32c              12644  2 xfs,drbd

用drbd启动mysql并设置centosa为主mysql：

[[email protected] ~]# drbdadm up mysql
[[email protected] ~]# drbdadm -- --forceprimary mysql

查看状态：

[[email protected] ~]# cat /proc/drbd
version: 8.4.10-1 (api:1/proto:86-101)
GIT-hash:a4d5de01fffd7e4cde48a080e2c686f9e8cebf4c build by [email protected], 2017-09-1514:23:22
 
 1:cs:WFConnection ro:Primary/Unknown ds:UpToDate/DUnknown C r----s
   ns:0 nr:0 dw:0 dr:912 al:8 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:foos:2096028

 

在对端节点执行操作：

[[email protected] ~]# drbdadm create-md mysql
initializing activity log
initializing bitmap (64 KB) to all zero
Writing meta data...
New drbd meta data block successfullycreated.
[[email protected] ~]# modprobe drbd
[[email protected] ~]# drbdadm up mysql

 

在对端查看状态：

[[email protected] ~]# cat /proc/drbd
version: 8.4.10-1 (api:1/proto:86-101)
GIT-hash:a4d5de01fffd7e4cde48a080e2c686f9e8cebf4c build by [email protected], 2017-09-1514:23:22
 
 1:cs:SyncTarget ro:Secondary/Primary ds:Inconsistent/UpToDate C r-----
   ns:0 nr:1748992 dw:1748992 dr:0 al:8 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:foos:347036
       [===============>....]sync‘ed: 83.6% (347036/2096028)K
       finish:0:00:08 speed: 39,832 (39,748) want: 59,560 K/sec

 

格式化并挂载：

[[email protected] ~]# mkfs.xfs /dev/drbd1
[[email protected] ~]# mount /dev/drbd1 /data

 

在数据库添加一个数据库：

MariaDB [(none)]> create databasecentos;
Query OK, 1 row affected (0.04 sec)
 
MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| centos             |
| mysql              |
| performance_schema |
| test               |
+--------------------+
5 rows in set (0.00 sec)

 

查看数据库存放位置：

[[email protected] ~]# ls /data
aria_log.00000001  aria_log_control  centos ibdata1  ib_logfile0  ib_logfile1 mysql  performance_schema  test

 

停止数据库并卸载：

[[email protected] ~]# systemctl stop mariadb
[[email protected] ~]# umount /data

要想从能挂载必须将主降为从：

[[email protected] ~]# drbdadm secondary mysql

然后去到从，将从升为主然后挂载：

[[email protected] ~]# drbdadm primary mysql
[[email protected] ~]# mount /dev/drbd1 /data

查看是否有数据库文件：

[[email protected] ~]# cd /data
[[email protected] data]# ls
aria_log.00000001  aria_log_control  centos ibdata1  ib_logfile0  ib_logfile1 mysql  performance_schema  test

本文出自 “运维小记” 博客，请务必保留此出处http://lsfandlinux.blog.51cto.com/13405754/1975811