gitlab 搭建 备份 升级 迁移恢复
Posted
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了gitlab 搭建 备份 升级 迁移恢复相关的知识，希望对你有一定的参考价值。
参考技术A在执行命令之前，将gitlab.example.com替换为你的实际域名。完成后，通过运行以下命令启动GitLab实例：
配置后应启动所有的GitLab服务：
停止用户连接
创建备份
如果出错请检查权限问题 我的是默认root
可以加sudo重新试一下
gitlab普通升级就正常升级就可以了
升级不能跨越大版本号，因此只能升级到当前大版本号到最高版本，
方可升级到下一个大版本号
如果是跨大版本升级要严格按照官方指导的升级顺序进行
参考:
https://docs.gitlab.com/ce/policy/maintenance.html
1.执行备份数据
2.在目标机器中搭建与执行备份相同版本的gitlab
版本一定要相同
3.将备份的tar包复制到目标机器备份目录
默认路径为: /var/opt/gitlab/backups/
4.恢复数据
正常情况下就是以上这些步骤了
如果你整个过程顺顺利利的那么到这里就结束了
但是我的过程中充满了曲折
以下是我遇到的一些错误
仅以记录供参考
gitlab-ctl reconfigure
gitlab-ctl restart
即可生效
postgresql 没有启动
参考 https://www.tlanyan.me/deal-gitlab-upgrade-error/
在升级完成 执行gitlab-ctl reconfigure的时候出现
参照的这个
http://www.doc88.com/p-2542809540436.html
我也没看太懂原理
反正好使 回头再研究
至此 gitlab总算启动起来了
感谢google&baidu各路大神
以上
gitlab升级和迁移
由于近期公司gitlab服务器老是卡顿和出现其他问题，然后也很久没有升级过了，现在版本还是8.10.5，而官网最新版本已经是11.2了。另一个原因是gitlab所在的这台服务器快到期了，想换一台配置更好些的服务器，故对此进行升级和迁移。
升级思路：先在新服务器上安装一个和原版本相同的gitlab，然后备份原版本gitlab数据，备份完在新服务器恢复，恢复完在进行升级。
本文参照：https://github.com/gitlabhq/gitlab-recipes/tree/master/install/centos
安装环境：
操作系统CentOS 6.10
#Distribution : CentOS 6.10
#GitLab version : 8.10.5
#GitLab-shell : 3.2.1
#Ruby version : ruby 2.2.2p95 (2015-04-13 revision 50295) [x86_64-linux]
#Gem version : 2.4.5
#Redis-server : Redis server version3.2.11
#Web Server : Nginx/1.10.2
#Database : mysql 5.7
1、添加epel库
#wget -O /etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL-6 https://getfedora.org/static/0608B895.txt #rpm --import /etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL-6
验证密钥是否已成功安装：#rpm -qa gpg*
#gpg-pubkey-0608b895-4bd22942
2、安装epel-release-6-8.noarch包，它将在您的系统上启用EPEL存储库：(这里虽然我们是6.10的系统，但装这个也能用)
#rpm -Uvh http://dl.fedoraproject.org/pub/epel/6/x86_64/epel-release-6-8.noarch.rpm
验证是否已启用EPEL和remi-safe存储库：
如果看不到它们，请使用下面的命令（从yum-utils包中）启用它们：
#yum-config-manager --enable epel --enable remi-safe
3、安装gitlab所需的工具：
#yum -y update #yum -y groupinstall ‘Development Tools‘ #yum -y install readline readline-devel ncurses-devel gdbm-devel glibc-devel tcl-devel openssl-devel curl-devel expat-devel db4-devel byacc sqlite-devel libyaml libyaml-devel libffi libffi-devel libxml2 libxml2-devel libxslt libxslt-devel libicu libicu-devel system-config-firewall-tui redis sudo wget crontabs logwatch logrotate perl-Time-HiRes git cmake libcom_err-devel.i686 libcom_err-devel.x86_64 nodejs # For reStructuredText markup language support, install required package: #yum -y install python-docutils
RHEL备注
如果未安装某些软件包（例如gdbm-devel，libffi-devel和libicu-devel），请将rhel6可选软件包repo添加到服务器以获取这些软件包：
#yum-config-manager --enable rhel-6-server-optional-rpms
4、安装邮件服务器：
#yum -y install postfix
#chkconfig postfix on
5、安装git(这里我们用源码包安装方式)
1）先移除系统中原有的低版本git：
#yum -y remove git
备注：默认centos的git版本是1.7.10，必须删除后，再下载源码进行安装
2)安装git的相关依赖包：
#yum install zlib-devel perl-CPAN gettext curl-devel expat-devel gettext-devel openssl-devel
3)编译安装git：
#mkdir /tmp/git && cd /tmp/git #curl --progress https://www.kernel.org/pub/software/scm/git/git-2.9.0.tar.gz | tar xz #cd git-2.9.0 #./configure --prefix=/usr/local/git #make && make install
4)配置环境变量：
在/etc/profile最后面加上下面这行，然后source /etc/profile使之生效
export PATH=/usr/local/git/bin:$PATH
5)验证一下是否成功：
6、安装ruby：
1）移除已有的ruby（如果存在）
yum -y remove ruby
注：如果是源码包安装的：
#cd <your-ruby-source-path> && make uninstall
2)编译安装ruby：
#mkdir /tmp/ruby && cd /tmp/ruby #curl --progress https://cache.ruby-lang.org/pub/ruby/2.2/ruby-2.2.2.tar.gz |tar xz #cd ruby-2.2.2 && ./configure --prefix=/usr/local/ruby --disable-install-rdoc && make && make install
3）配置环境变量：
同理在/etc/profile文件最后加上下面一句，并且执行source /etc/profile使之生效。
export PATH=/usr/local/ruby/bin:$PATH
4）验证是否成功：
5）安装bundler：
#gem install bundler --no-rdoc
#gem install charlock_holmes
7、安装go编译器：
从GitLab 8.0开始，Git HTTP请求由gitlab-workhorse（以前的gitlab-git-http-server）处理。这是一个用Go编写的小守护进程。要安装gitlab-workhorse，我们需要一个Go编译器
#yum -y install golang golang-bin golang-src
8、为gitlab创建系统用户：
#adduser --system --shell /bin/bash--comment ‘GitLab‘ --create-home --home-dir /data/gitlab/ git
9、数据库安装和相关库的创建：
这里由于我们之前版本gitlab使用的是腾讯云的数据库，这里就不在另外安装数据库了，直接在数据库相关配置文件里配置之前数据库的信息即可。
10、安装配置redis：
1）同样先删除旧的redis
#yum -y remove redis
2)重新安装redis:
#yum -y install redis
装完后查看下版本：
3）修改redis配置文件：
a、备份配置文件
#cp /etc/redis.conf /etc/redis.conf.bak
b、修改/tmp/redis.sock为/var/run/redis/redis.sock
c、修改/var/var/run/redis/redis.sock的权限为755
#chmod 755 /var/run/redis
d、配置redis自启动
#chkconfig --level 35 redis on
e、启动redis并验证
f、附加git到redis组
#usermod -aG redis git
11、安装gitlab
1)取gitlab源代码
#su - git
$cd /data/gitlab $git clone https://gitlab.com/gitlab-org/gitlab-ce.git gitlab $cd /gitlab $git branch -a #查看远程分支 $git checkout -b v8.10.5 #切换到8.10.5版本分支上
$cat VERSION
8.10.5
2)修改配置文件
$cp config/gitlab.yml.example config/gitlab.yml
$vim config/gitlab.yml
这里host我随便配置的一个域名，以自身情况进行配置
$cp config/secrets.yml.example config/secrets.yml $chmod 0600 config/secrets.yml $chmod -R git log $chmod -R git tmp $chmod -R u+rwX,go-w log $chmod -R u+rwX tmp
$chmod -R u+rwX tmp/pids/
$chmod -R u+rwX tmp/sockets/
$mkdir public/uploads/
$chmod 0700 public/uploads
$chmod -R u+rwX builds
$chmod -R u+rwX shared/artifacts
$cp config/unicorn.rb.example config/unicorn.rb
#查看系统核心数
$nproc
4
$vim config/unicorn.rb #下面的worker_processes就是配置成上面nproc的值
$vim config/resque.yml (redis配置文件)
配置mysql：
$cp config/database.yml.mysql config/database.yml
$vim config/database.yml
12、安装gem --网上都说换成淘宝源，但我装的时候用官网源也不卡，所以就没换
$bundle install --deployment --without development test postgres aws
13、安装gitlab-shell
$cat /data/gitlab/gitlab/GITLAB_SHELL_VERSION --先查看此版本的gitlab需安装什么版本的gitlab-shell 3.2.1 $su - git $sudo -u git -H bundle exec rake gitlab:shell:install[v3.2.1] REDIS_URL=unix:/var/run/redis/redis.sock RAILS_ENV=production
配置config.yml文件
$cp gitlab-shell/config.yml.example gitlab-shell/config.yml
$vim gitlab-shell/config.yml
执行安装命令，创建对应目录和文件
$./bin/install
14、安装gitlab-workhorse
$cd /data/gitlab $git clone https://gitlab.com/gitlab-org/gitlab-workhorse.git $cat gitlab/GITLAB_WORKHORSE_VERSION --查看需要安装哪个版本的gitlab-workhorse 0.7.8 $cd gitlab-workhorse/ $git checkout v0.7.8
$cat gitlab-workhorse/VERSION
0.7.8
$make
15、设置启动脚本
$cp lib/support/init.d/gitlab /etc/init.d/gitlab
$chkconfig gitlab on
$vim /etc/init.d/gitlab
16、设置logrotate日志切割(可选操作)
$cp lib/support/logrotate/gitlab /etc/logrotate.d/gitlab
17、配置web服务器：
这里我们配置nginx为例：
1）安装nginx:
#yum -y update
#yum -y install nginx
#chkconfig nginx on
2)配置gitlab
#cp /data/gitlab/gitlab/lib/support/nginx/gitlab /etc/nginx/conf.d/gitlab.conf
#vim /etc/nginx/conf.d/gitlab.conf
修改完用nginx -t 检测下语法有没有错误，没有错误的话就可以启动nginx了.
18、检查gitlab环境基础：
$bundle exec rake gitlab:env:info RAILS_ENV=production
为了没有遗漏任何内容，进行更彻底的检查：
$bundle exec rake gitlab:check RAILS_ENV=production
如果检测出来都是绿色的，那么说明没有问题，可以启动gitlab了。
#service gitlab start
至此，gitlab就安装完成了，接下来进行备份迁移。
这里我们把旧版本那台服务器称为A服务器，上面新装的服务器称为B服务器，以便下文书写方便：
1、备份数据：
1）升级迁移前先对A服务器上的gitlab作备份：
#su - git $cd /data/gitlab/gitlab $bundle exec rake gitlab:backup:create RAILS_ENV=production
备份的文件在/data/gitlab/gitlab/tmp/backups目录下：
2）备份数据库:这里由于使用的是第三方数据库(腾讯云数据库)，上面数据库配置这块已经配了那个数据库地址，这里就不在进行备份了。
3）备份keys
$cp /data/gitlab/.ssh/authorized_keys /tmp/authorized_keys
4)备份repositories目录
$cd /data/gitlab
$tar zxvf repositories.tar.gz ./repositories
把A服务器上备份的数据拷贝到B服务器：
#scp -P 36022 xxx_gitlab_backup.tar authorized_keys repositories.tar.gz [email protected]:/.......
2、恢复数据
1）导入仓库，检查权限
$cd /data/gitlab
$tar xvf repositories.tar.gz --A服务器拷贝过来的包
$chmod -R git. /data/gitlab/repositories
2）导入keys
$cat authorized_keys >>/data/gitlab/.ssh/authorized_keys
3)导入repos
$cd /data/gitlab/gitlab
$bundle exec rake gitlab:import:repos RAILS_ENV=production
3、检测
$cd /data/gitlab/gitlab
$bundle exec rake gitlab:check RAILS_ENV=production
检测没有问题就可以重启gitlab了
#service gitlab restart
重启完登入web客户端检查下数据一致性，没有问题的话，接着就可以进行升级了。
1、首先停掉B服务器的gitlab服务，在进行升级
#service gitlab stop
2、获取最新版本分支
$su -git
$cd /data/gitlab/gitlab
$git fetch --all
$git checkout -- Gemfile.lock db/schema.rb
$git checkout v10.8 -b v10.8 --切换到要升级到的版本分支
$cat VERSION
3、升级gitlab-shell
$ cd /data/gitlab/gitlab-shell $ git fetch $ git checkout v`cat /data/gitlab/gitlab/GITLAB_SHELL_VERSION` -b v`cat /data/gitlab/gitlab/GITLAB_SHELL_VERSION`
4、升级gitlab-workhorse
$ cd /data/gitlab/gitlab-workhorse $ git fetch $ git checkout v`cat /data/gitlab/gitlab/GITLAB_WORKHORSE_VERSION` -b v`cat /data/gitlab/gitlab/GITLAB_WORKHORSE_VERSION`
$make
5、安装库环境
$cd /data/gitlab/gitlab
# PostgreSQL
$bundle install --without development test mysql --deployment
# MySQL
$bundle install --without development test postgres --deployment
# Optional:
clean up old gems $bundle clean
# Run database migrations
$bundle exec rake db:migrate RAILS_ENV=production
# Clean up assets and cache
$bundle exec rake assets:clean assets:precompile cache:clear RAILS_ENV=production
6、启动gitlab
#service gitlab restart
#service nginx restart
7、检查程序状态
检查GitLab及其环境是否配置正确： $ bundle exec rake gitlab:env:info RAILS_ENV=production 确保没有报错,运行一次更彻底的检查: $bundle exec rake gitlab:check RAILS_ENV=production 如果所有项目是绿色的,那么恭喜你升级完成! gitlab从8.10.5升级到10.8到此结束。
以上是关于gitlab 搭建 备份 升级 迁移恢复的主要内容，如果未能解决你的问题，请参考以下文章