版本管理工具GitGitlab高可用

Posted yunxizhujing

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了版本管理工具GitGitlab高可用相关的知识,希望对你有一定的参考价值。

高可用模式

企业版

技术分享图片

社区版

技术分享图片

我们这里说一下成本比较低的主备模式,它主要依赖的是DRBD方式进行数据同步,需要2台ALL IN ONE的GitLab服务器,也就是通过上面安装方式把所有组件都安装在一起的2台机器。

什么是DRBD

它是分布式复制块设备,软件实现的无需共享可以在服务器之间镜像块设备的存储复制解决方案。

技术分享图片

左侧为A节点,右侧为B节点

DRBD运行在内核里,它是一个内核模块。Linux2.6.33开始已经整合进内核。上图A为活动节点,B为被动节点。A收到数据发往内核的数据通路,DRBD在数据通路中注册钩子检查数据,当发现接收到的数据是发往自己管理的存储位置时,就复制一份,一份存储到本地的DRBD存储设备上,一份就发给TCP/IP协议栈,通过网卡传输到B节点的TCP/IP协议栈,B节点运行的DRBD模块同样在数据通路上坚持,发现有数据过来就存储到DRBD对应的位置上。如果A节点宕机,B节点上线,B节点接收到数据存储到本地,当A节点恢复以后在把变动数据同步到A节点上。

流程如下:

  • SERVICE将数据写入  FIEL SYSEM->BUFFER CACHE->DRDB
  • DRDB兵分两路一路通过磁盘DISK DRIVER写入磁盘
  • 另外一路通过TCP/IP将数据通过网卡发送到对端DRBD节点

工作模式:

  • 同步模式:当写入A服务器和B服务器成功后才返回。这是DRBD协议的C模式。生产环境中该模式最常用。
  • 异步模式:写入A服务器后返回,还有可能是写入本地服务器和远端服务器的缓存成功后返回,这属于DRBD的A、B级别。

DRBD建立在底层设备之上,对于用户来说一个DRBD设备就像一块物理磁盘。它支持磁盘、软RAID、LVM等其他块设备。

部署

# 添加源
# CentOS 6
rpm -ivh http://www.elrepo.org/elrepo-release-6-6.el6.elrepo.noarch.rpm
# CentOS 7
rpm -ivh http://www.elrepo.org/elrepo-release-7.0-2.el7.elrepo.noarch.rpm

# 安装
yum -y install drbd84-utils kmod-drbd84

# 安装后重启
reboot

技术分享图片

修改配置文件

下面是主配置文件

技术分享图片

/etc/drbd.conf是主配置文件,但是它里面引用了2个,所以真正需要配置的是在它包含的配置文件中进行配置。

技术分享图片

/etc/drbd.d/global_common.conf包含global和common这两部分DRBD配置信息。而*.res文件而资源文件。

/etc/drbd.d/global_common.conf配置文件说明

/usr/share/doc/drbd84-utils-9.3.1/drbd.conf.example这是一个模板文件。

技术分享图片

默认这个配置文件里面没有配置什么具体内容

技术分享图片

我这里就配置了几项,主要就是协议。其他其实都不用配置都是默认值。

技术分享图片

*.res资源文件说明

默认没有这个文件,手动建立一个,以.res结尾

技术分享图片

资源是一个复制的数据集,它包括Resource name也就是资源名称、
Volumes也就是卷在一个资源集合里面可以有多个卷复制的使用共用一个复制流;另外还会包含DRBD device,这是一个虚拟块设备,在系统上表现是的/dev/XXX,这里可不是真实的设备,真是的设备都是/dev/sda|b之类的。如果是多个资源再会用到Volumes

技术分享图片

我的资源文件

技术分享图片

注意:网络连接方面建议使用背靠背的直连方式这条链路主要用于复制数据,我这里实验环境就共用一条链路。
如果你使用LVM如何找到块设备?

技术分享图片

如果你使用普通分区那就是/dev/sda|b[NUMBER]这种形式。

建立磁盘元数据和启用资源

保障你使用的块设备是空的否则会初始化失败。两个节点都要这样做初始化。

技术分享图片

启用资源,反之就是 drbdadm down 资源名称

技术分享图片

它这里知道自己是Secondary但是不知道对方,是因为防火墙导致,把两边防火墙关闭就好了,当然你也可以添加测录。

技术分享图片

两台都是这个状态表示正常

技术分享图片

启动服务

技术分享图片

技术分享图片

这时候我们之前没有的那个/dev/drbd0就出现了

技术分享图片

设置主节点并创建文件系统

这一步只能在你确定是主节点的节点上执行,不需要两个节点都执行。设置完成后再次查看状态。

技术分享图片

文件系统只能挂载到主节点上,也只能在设置了主节点后才能对这个/dev/drbd0这个设备格式化和挂载。

技术分享图片

再次查看同步已经完成

技术分享图片

大家肯定觉得我之前安装gitlab的时候设置仓库路径就是/data,没错,我做HA之前把gitlab服务停止掉,然后通过cp –rp命令吧git-data目录都拷贝到其他地方,然后才做的其他操作,当HA完成后使用相同的命令拷贝回来就行。

主从切换

技术分享图片

监控工具 

drbd-overview   检查角色以及同步状态

技术分享图片

drbdadm status RESOURCE_NAME

技术分享图片

drbdsetup status gitdatadrbd --verbose –statistics  详细信息

技术分享图片

部署遇到的错误

1. not defined in your config (for this host).

技术分享图片

技术分享图片

这是因为配置文件里定义的和主机实际的名称不符。修改/etc/hostname文件。

2. open(/dev/mapper/gitdata-lv_gitdata) failed: Device or resource busy

技术分享图片

这里是因为我的那个LVM卷挂载了,需要先卸载

3. ‘drbdmeta 0 v08  terminated with exit code 40

技术分享图片

说明该设备数据不为0

技术分享图片

参考文档

https://docs.gitlab.com/omnibus/roles/README.html
https://docs.gitlab.com/ce/administration/high_availability/README.html
https://docs.linbit.com/docs/users-guide-8.4/#s-distro-packages
https://www.cnblogs.com/wsl222000/p/5777382.html
https://segmentfault.com/q/1010000010290689
https://blog.csdn.net/tjiyu/article/details/52723125
https://blog.csdn.net/yanggd1987/article/details/50504599
http://blog.51cto.com/freeloda/1275384










以上是关于版本管理工具GitGitlab高可用的主要内容,如果未能解决你的问题,请参考以下文章

SpringCloud系列四:Eureka 服务发现框架(定义 Eureka 服务端Eureka 服务信息Eureka 发现管理Eureka 安全配置Eureka-HA(高可用) 机制Eur(代码片段

如何使用支持库 25.0.0 及更高版本获取片段()

使用 Visual Studio 结合 AWS Beanstalk 发布高可用Web应用

如何管理在每个 git 版本中添加私有代码片段?

异步函数仅在面向 ECMAScript 2015 或更高版本时可用

异步功能仅在定位ECMAScript 2015或更高版本时可用