SVN+Ansible搭建自动化提交代码

Posted 曾想仗剑走天涯

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了SVN+Ansible搭建自动化提交代码相关的知识,希望对你有一定的参考价值。

一、基本的SVN的服务配置

查看可使用的 svn 命令:

[[email protected] ~]# svn
svn            svndumpfilter  svnrdump       svnsync        
svnadmin       svnlook        svnserve       svnversion    

1、新建一个目录用于存储SVN所有文件

[[email protected] ~]# mkdir /home/svn

2、新建一个版本仓库

[[email protected] ~]# svnadmin create /home/svn/project

3、初始化版本仓库中的目录

[[email protected] ~]# mkdir -p /root/project/{server,client,test} (建立临时目录)
[[email protected] ~]# svn import /root/project/ file:///home/svn/project/ -m "svn dir init"
Adding         /root/project/test
Adding         /root/project/server
Adding         /root/project/client

Committed revision 1.

[[email protected] ~]# rm -rf /root/project/ (删除临时建立的目录)

4、添加用户

要添加SVN用户非常简单,只需在/home/svn/project/conf/passwd文件添加一个形如“username=password”的条目就可以了。为了测试,我添加了如下内容:

[users]
# harry = harryssecret
# sally = sallyssecret
pm = pm_pw
server_group = server_pw
client_group = client_pw
test_group = test_pw

5、修改用户访问策略

/home/svn/project/conf/authz记录用户的访问策略,以下是参考:

[groups]
project_p = pm
project_s = server1,server2,server3
project_c = client1,client2,client3
project_t = test1,test1,test1

[project:/]
@project_p = rw
* =

[project:/server]
@project_p = rw
@project_s = rw
* =

[project:/client]
@project_p = rw
@project_c = rw
* =

[project:/doc]
@project_p = rw
@project_s = r
@project_c = r
@project_t = r
* =

说明:以上信息表示,只有project_p用户组有根目录的读写权。r表示对该目录有读权限,w表示对该目录有写权限,rw表示对该目录有读写权限。

最后一行的*=表示,除了上面设置了权限的用户组之外,其他任何人都被禁止访问本目录。这个很重要,一定要加上!

6、修改svnserve.conf文件,让用户和策略配置升效.

svnserve.conf内容如下:

[general]
anon-access = none
auth-access = write
password-db = /home/svn/project/conf/passwd
authz-db = /home/svn/project/conf/authz

7、启动服务器

# svnserve -d -r /home/svn

注意:如果修改了svn配置,需要重启svn服务,步骤如下:

# ps -aux|grep svnserve
# kill -9 ID号
# svnserve -d -r /home/svn

8、测试服务器

# svn co svn://192.168.60.10/project
Authentication realm: <svn://192.168.60.10:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d
Password for root:
Authentication realm: <svn://192.168.60.10:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d
Username: server_group
Password for server_group:
svn: Authorization failed ( server_group没用根目录的访问权 )

# svn co svn://192.168.60.10/project
Authentication realm: <svn://192.168.60.10:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d
Password for ‘root’:
Authentication realm: <svn://192.168.60.10:3690> 92731041-2dae-4c23-97fd-9e1ed7f0d18d
Username: pm
Password for ‘pm’:
A    project/test
A    project/server
A    project/client
Checked out revision 1.  ( 测试提取成功 )

# cd project/server
# vim main.c
# svn add main.c
# svn commit main.c -m “测试一下我的C程序,看什么看,不行啊??”
Adding         main.c
Transmitting file data .
Committed revision 2.  ( 测试提交成功 )

二,结合 ansible 做代码自动部署

实验环境:

  • svn服务器:192.168.0.120 (vm_mac.guli.com)
  • 目标服务器:192.168.0.171 (lamp1.guli.com)

测试目标:使用 svn 提交代码,如果提交时添加注释中含有 "auto_deploy" 字符串,则自动部署到目标服务器中。

编辑 post-commit 脚本:

[[email protected]_mac hooks]# vi /home/svn/project/hooks/post-commit


#!bin/bash
REPOS="$1"
REV="$2"

export LC_CTYPE=en_US.UTF-8

if (svnlook log -r $REV /home/svn/project | grep "auto_deploy"); then
    echo "`date` $REV auto deploy command received" >> /tmp/test_svnautocommit.txt
    ansible lamp -a "svn checkout "svn://192.168.0.120/project" /var/www/html/web1 --force --username="pm" --password="pm_pw" --non-interactive"
fi

脚本说明:

如果提交时添加注释中含有 "auto_deploy",则记录一条简单的日志,并且执行一条 ansible 命令,意思是在 lamp 组的所有主机上(这里只定义了一个 lamp1.guli.com),执行 svn checkout 操作,将目标 repo 检出到本地 /var/www/html/web1。第一次执行时,如果目录不存在,会自动创建目录;否则进行检出。

ansible 的用户组配置:

[[email protected]_mac hooks]# vi /etc/ansible/hosts
[lamp]
lamp1.guli.com

ansible 主机和 lamp1 建立 ssh 信任步骤等暂略,注意那是必要的。

测试:

1.lamp1 主机上,现在还没有创建 web1 目录:

[[email protected] html]# pwd
/var/www/html
[[email protected] html]# ll
total 4
-rw-r--r-- 1 root root 24 Jul 16 14:54 index.html
[[email protected] html]# hostname
lamp1

2.在 svn 服务器上,现在 /root/project/test 目录下有如下文件,

[[email protected]_mac test]# pwd
 /root/project/test
 [[email protected]_mac test]# ll
 total 0
 -rw-r--r-- 1 root root 0 Aug  5 11:00 ccc
 -rw-r--r-- 1 root root 0 Aug  5 11:06 ddd
 -rw-r--r-- 1 root root 0 Aug  5 11:37 eee
 -rw-r--r-- 1 root root 0 Aug  5 12:31 fff

3.我们添加一个 ggg 文件,并且提交

[[email protected]_mac test]# touch ggg
[[email protected]_mac test]# svn add ggg
A         ggg
[[email protected]_mac test]# svn commit -m "auto_deploy"
Adding         test/ggg
Transmitting file data .
Committed revision 47.

现在版本是 47

4.查看 lamp1 上是否同步过去了:

[[email protected] html]# ll
total 8
-rw-r--r-- 1 root root   24 Jul 16 14:54 index.html
drwxr-xr-x 6 root root 4096 Aug  5 13:29 web1
[[email protected] html]# ll web1/test/
total 0
-rw-r--r-- 1 root root 0 Aug  5 13:29 ccc
-rw-r--r-- 1 root root 0 Aug  5 13:29 ddd
-rw-r--r-- 1 root root 0 Aug  5 13:29 eee
-rw-r--r-- 1 root root 0 Aug  5 13:29 fff
-rw-r--r-- 1 root root 0 Aug  5 13:29 ggg

我们看到,在 /var/www/html 目录下多了一个 web1 目录,并且 test 子目录的内容是同步的

5.现在到 lamp1 上删除一个文件 ccc ,并提交:

[[email protected]_mac test]# svn del ccc
D         ccc
[[email protected]_mac test]# svn commit -m "auto_deploy"
Deleting       test/ccc

Committed revision 48.

[[email protected]_mac test]# ll
total 0
-rw-r--r-- 1 root root 0 Aug  5 11:06 ddd
-rw-r--r-- 1 root root 0 Aug  5 11:37 eee
-rw-r--r-- 1 root root 0 Aug  5 12:31 fff
-rw-r--r-- 1 root root 0 Aug  5 13:28 ggg

现在版本号到了 48

6.再查看 lamp1 上是否同步过去了:

[[email protected] html]# ll web1/test/
total 0
-rw-r--r-- 1 root root 0 Aug  5 13:29 ddd
-rw-r--r-- 1 root root 0 Aug  5 13:29 eee
-rw-r--r-- 1 root root 0 Aug  5 13:29 fff
-rw-r--r-- 1 root root 0 Aug  5 13:29 ggg

可以看到 ccc 文件成功被删除了。

好了,到了这里已经基本实现了。这是使用 svn 检出实现的方式。

 

后续需要完善的几个方面:

1.实验里的检出可能没有加密,后面考虑使用 svn+ssh 协议,类似这样,更为安全,这个等有时间再完善一下:

# Checkout subversion repository to specified folder.
- subversion: repo=svn+ssh://192.168.0.120/project dest=/var/www/html/web1

ansible lamp -m subversion -a "repo=svn+ssh://192.168.0.120/project dest=/var/www/html/web1 username=pm password=pm_pw revision=$REV"

2.检出时,加上 -r $REV 应该更好,因为默认是检出 HEAD 版本,对于这一点待查

3.我们根据注释里的 auto_deploy 触发自动部署线上环境,也可以使用其他字符串,如 auto_test_deploy 触发自动部署测试环境。进一步设想,是开发一个 web 界面,手动选择自动部署测试环境,或者部署线上环境,这样比较直观好看一些。

4.checkout 是每次都拷贝覆盖,还是只更新需要更新的?

我们实验一下 svn update:

ansible lamp -a "svn update "svn://192.168.0.120/project" /var/www/html/web1 --force --username="pm" --password="pm_pw" --non-interactive"

增加 hhh 文件,并提交,注释为空,不要触发自动部署:

[[email protected]_mac test]# touch hhh
[[email protected]_mac test]# svn add hhh
A         hhh
[[email protected]_mac test]# svn commit -m ""
Adding         test/hhh
Transmitting file data .
Committed revision 49.
[[email protected]_mac test]# ansible lamp -a "svn update "svn://192.168.0.120/project" /var/www/html/web1 --force --username="pm" --password="pm_pw" --non-interactive"
lamp1.guli.com | SUCCESS | rc=0 >>
Skipped svn://192.168.0.120/project
A    /var/www/html/web1/test/hhh
Updated to revision 49.
Summary of conflicts:
  Skipped paths: 1

查看 lamp1 上是否同步过去了:

[[email protected] html]# ll web1/test/
total 0
-rw-r--r-- 1 root root 0 Aug  5 13:29 ddd
-rw-r--r-- 1 root root 0 Aug  5 13:29 eee
-rw-r--r-- 1 root root 0 Aug  5 13:29 fff
-rw-r--r-- 1 root root 0 Aug  5 13:29 ggg
-rw-r--r-- 1 root root 0 Aug  5 13:38 hhh

可以看到成功添加了 hhh

试一试删除 ddd 文件,并且提交:

[[email protected]_mac test]# ll
total 0
-rw-r--r-- 1 root root 0 Aug  5 11:06 ddd
-rw-r--r-- 1 root root 0 Aug  5 11:37 eee
-rw-r--r-- 1 root root 0 Aug  5 12:31 fff
-rw-r--r-- 1 root root 0 Aug  5 13:28 ggg
-rw-r--r-- 1 root root 0 Aug  5 13:38 hhh
[[email protected]_mac test]# svn del ddd
D         ddd
[[email protected]_mac test]# svn commit -m ""
Deleting       test/ddd

Committed revision 50.
[[email protected]_mac test]# ansible lamp -a "svn update "svn://192.168.0.120/project" /var/www/html/web1 --force --username="pm" --password="pm_pw" --non-interactive"
lamp1.guli.com | SUCCESS | rc=0 >>
Skipped svn://192.168.0.120/project
D    /var/www/html/web1/test/ddd
Updated to revision 50.
Summary of conflicts:
  Skipped paths: 1

查看 lamp1 上是否同步过去了:

[[email protected] html]# ll web1/test/
total 0
-rw-r--r-- 1 root root 0 Aug  5 13:29 eee
-rw-r--r-- 1 root root 0 Aug  5 13:29 fff
-rw-r--r-- 1 root root 0 Aug  5 13:29 ggg
-rw-r--r-- 1 root root 0 Aug  5 13:38 hhh

已经删除了 ddd 文件,证明是同步了

注,svn 非交互式:--non-interactive,第一次 checkout 不再问你是否需要保存密码。

看来也是可行的。

到这里为止,已经可以用一个实际的项目做部署测试,后面有时间再来补上这一部分。但是我想看了这整个的步骤,自己做实验验证一下也比较简单了。

nginx 反向代理配置

# svn update server
server {
    listen 80;
    server_name dosvn.wljiashi.cn;
    #access_log  off;
    access_log  /tmp/dosvn.log;

    location / {
        include proxy.conf
        proxy_pass      http://db01:8180;
    }

}
 
GOOD LUCK!
 
参考项目 https://github.com/ACHONGE/subversion.git
参考博客 https://www.jianshu.com/p/50b7dc07f1f1

以上是关于SVN+Ansible搭建自动化提交代码的主要内容,如果未能解决你的问题,请参考以下文章

怎么把java自动化代码提交到jenkins

如何使用powershell从svn服务器自动更新

将代码提交到SVN存储库后,垃圾字符会自动更改

VisualSVN Server与TortoiseSVN搭建SVN版本控制系统

TortoiseSVN与VisualSVN Server搭建SVN版本控制系统

SVN关于提交代码时的问题