[ jenkins ] git+jenkins+maven + ansible 部署java程序

Posted hukey

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了[ jenkins ] git+jenkins+maven + ansible 部署java程序相关的知识,希望对你有一定的参考价值。

1. 工具介绍 

git:版本控制,一般都是托管到代码仓库的。如 github、coding、gitlab (本文以 coding 为例)

jenkins:持续集成工具之一,也是最常用的工具,主要工作就是将代码从git仓库pull下来,通过maven打包,在部署到服务器上

maven:java 项目管理构建自动化工具,主要是将 java 源代码打包成 jar 程序

ansible:批量部署程序所使用的工具。

 

下面介绍的部署过程使用到了以上 4 个工具。

 

主机介绍:

技术图片

 

实现思路:

技术图片

 

 

2. 持续集成实例

 

2.1 首先将源代码托管到 git 仓库,具体操作自行百度,例如:coding仓库。

技术图片

我这里是一个私有仓库,请自行创建仓库。

 

2.2 安装 jenkins 和 maven 工具

 

【jenkins 安装过程】

这里最好将 jenkins 配置文件修改如下:

[root@192.168.118.17 ~]#vim /etc/sysconfig/jenkins
...
JENKINS_USER="root"
...

修改为 root 这样可以直接使用 root用户打包,不用在其他用户家目录下构建依赖包

 

本次构建使用了 jenkins 的 pipeline 功能,这里需要安装一些插件:

系统管理 -> 插件管理 -> 可选插件  搜索一下插件进行安装:

Blue Ocean

插件安装完成后,重启下服务:

[root@192.168.118.17 ~]#systemctl restart jenkins

 

安装 git 和 maven

 

安装git

[root@192.168.118.17 ~]#yum install git -y

 

安装 maven

下载地址:http://maven.apache.org/download.cgi
[root@192.168.118.17 /usr/local/src]#tar xf apache-maven-3.1.1-bin.tar.gz -C /usr/local/
[root@192.168.118.17 /usr/local/src]#cd /usr/local/
[root@192.168.118.17 /usr/local]#ln -vs /usr/local/apache-maven-3.1.1/ /usr/local/maven
‘/usr/local/maven’ -> ‘/usr/local/apache-maven-3.1.1/’

[root@192.168.118.17 /usr/local]#ln -vs /usr/local/maven/bin/mvn /usr/bin/
‘/usr/bin/mvn’ -> ‘/usr/local/maven/bin/mvn’

 

安装好两个工具后,首先通过 git 将源代码克隆下来,通过 maven 进行测试。

[root@192.168.118.17 ~]#git clone https://git.dev.tencent.com/hukey/winstar-common-api.git
[root@192.168.118.17 ~]#cd winstar-common-api/
[root@192.168.118.17 ~/winstar-common-api]#mvn clean package -Dmaven.test.skip=true

第一次通过 mvn 打包时间会长一点。

技术图片

出现如上信息,则打包完成。

 

2.3 通过 ansible 将程序推送到需要部署的节点

接下来的思路:

  通过 ansible 将 xxx.jar 文件推送到需要部署的服务器上,启动起来。

 

安装 ansible 并配置:

[root@192.168.118.17 ~]#yum install ansible -y

(1)将 ansible 主机连接 程序部署主机设置为免密码登录

[root@192.168.118.17 ~]#ssh-keygen -t rsa -P ‘‘
[root@192.168.118.17 ~]#ssh-copy-id root@192.168.118.19
[root@192.168.118.17 ~]#ssh-copy-id root@192.168.118.20

(2)配置 ansible 组

[root@192.168.118.17 ~]#vim /etc/ansible/hosts
...
[common-api]
192.168.118.19:22 ansible_ssh_user=root adrser=/app/node-1/
192.168.118.20:22 ansible_ssh_user=root adrser=/app/node-1/
...

 格式:
ip:port ansible_ssh_user=用户名 adrser=设置一个变量,这里设置的变量为一个程序部署目录,这两台主机目录必须存在。

 

(3)测试 ansible 无密码验证

[root@192.168.118.17 ~]#ansible common-api -m ping
192.168.118.20 | SUCCESS => 
    "changed": false, 
    "ping": "pong"

192.168.118.19 | SUCCESS => 
    "changed": false, 
    "ping": "pong"

(4)通过 ansible 为两台程序节点部署环境

创建启动程序目录:
[root@192.168.118.17 ~]#ansible common-api -m file  -a "path=/app/node-1 state=directory" 
192.168.118.19 | SUCCESS => 
    "changed": true, 
    "gid": 0, 
    "group": "root", 
    "mode": "0755", 
    "owner": "root", 
    "path": "/app/node-1", 
    "size": 6, 
    "state": "directory", 
    "uid": 0

192.168.118.20 | SUCCESS => 
    "changed": true, 
    "gid": 0, 
    "group": "root", 
    "mode": "0755", 
    "owner": "root", 
    "path": "/app/node-1", 
    "size": 6, 
    "state": "directory", 
    "uid": 0

 

为两台程序节点安装jdk

# 将jdk拷贝到远程主机,并解压到 /usr/local/ 目录
[root@192.168.118.17 ~]#ansible common-api -m unarchive -a "src=/usr/local/src/jdk-8u77-linux-x64.tar.gz dest=/usr/local/"

# 创建软链接文件
[root@192.168.118.17 ~]#ansible common-api -m file -a "path=/usr/bin/java src=/usr/local/jdk1.8.0_77/bin/java state=link"

[root@192.168.118.17 ~]#ansible common-api -m file -a "path=/usr/bin/javac src=/usr/local/jdk1.8.0_77/bin/javac state=link"

 

(5)首先将 jar 包推送到两台服务器上,是为了编写启动脚本比较方便。

[root@192.168.118.17 ~]#ansible common-api -m copy -a "src=/root/winstar-common-api/target/winstar-common-api-1.0.0-SNAPSHOT.jar dest=adrser"

(6)编写程序启动脚本

[root@192.168.118.19 /app/node-1]#vim service.sh 
#!/bin/bash
cd /app/node-1
start()
  if [ -f `ls *.jar` ];then
    APP=$(ls *.jar)
    nohup java -jar $APP &
  else
    echo "Error: no app!"
  fi


stop()
  pkill -9 java


update()
  if [ ! -d backup ];then
    mkdir -p backup
  fi
  mv -f *.jar backup
  rm -rf nohup.out



case $1 in
start)
  start
  ;;
stop)
  stop
  ;;
update)
  stop
  update
  ;;
*)
  echo "Usage: $0 [start | stop | update]"
esac

编写了一个比较简单的脚本,这个脚本只是用来测试使用,如果生产环境使用,还有许多地方需要进行改善。

将这个脚本放在两个程序节点 /app/node-1/目录下。

 

(7)通过 ansible 测试程序能否正常启动成功

第一步,将程序从控制节点拷贝到程序节点:

# 安装 net-tools 包,主要用到 netstat 命令
[root@192.168.118.17 ~]#ansible common-api -m yum -a "name=net-tools state=present"
# 查看目前在工作的端口信息
[root@192.168.118.17 ~]#ansible common-api  -a "netstat -ntplu"
192.168.118.19 | SUCCESS | rc=0 >>
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      891/sshd            
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      1454/master         
tcp6       0      0 :::22                   :::*                    LISTEN      891/sshd            
tcp6       0      0 ::1:25                  :::*                    LISTEN      1454/master         

192.168.118.20 | SUCCESS | rc=0 >>
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      882/sshd            
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      1369/master         
tcp6       0      0 :::22                   :::*                    LISTEN      882/sshd            
tcp6       0      0 ::1:25                  :::*                    LISTEN      1369/master

# 将应用程序拷贝到程序节点
[root@192.168.118.17 ~]#ansible common-api -m copy -a "src=/root/winstar-common-api/target/winstar-common-api-1.0.0-SNAPSHOT.jar dest=adrser"

第二步,启动程序,查看程序端口

# 启动应用程序
[root@192.168.118.17 ~]#ansible common-api  -a "sh adrser/service.sh start"
# 启动完毕间隔一段时间,查看应用程序端口是否启动完成
[root@192.168.118.17 ~]#ansible common-api  -a "netstat -ntplu"
192.168.118.19 | SUCCESS | rc=0 >>
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      891/sshd            
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      1454/master         
tcp6       0      0 :::3090                 :::*                    LISTEN      3447/java           
tcp6       0      0 :::3091                 :::*                    LISTEN      3447/java           
tcp6       0      0 :::22                   :::*                    LISTEN      891/sshd            
tcp6       0      0 ::1:25                  :::*                    LISTEN      1454/master         

192.168.118.20 | SUCCESS | rc=0 >>
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      882/sshd            
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      1369/master         
tcp6       0      0 :::3090                 :::*                    LISTEN      3200/java           
tcp6       0      0 :::3091                 :::*                    LISTEN      3200/java           
tcp6       0      0 :::22                   :::*                    LISTEN      882/sshd            
tcp6       0      0 ::1:25                  :::*                    LISTEN      1369/master

应用端口:3090,管理端口:3091 说明启动成功。

至于 stop 和 update 可以自行测试,必须要保证脚本的可用性,因为后面会用到。

 

2.4 配置 jenkins pipeline流水线

登录 jenkins -> 新建任务

技术图片

技术图片

应用并保存,这样 jenkins 配置已经完成。要使用 jenkins 的 pipeline 功能,要需要在 git 仓库里新增几个配置文件。

 

2.5 在 git 仓库配置 pipeline 文件

 登录到仓库页面

技术图片

 

Jenkinsfile 文件内容如下:

pipeline
    agent any
    stages 
        stage(‘Build‘) 
            steps
                sh ‘mvn clean package -Dmaven.test.skip=true‘
                echo ‘Build success.‘
            
        
        stage(‘Test‘) 
            steps
                sh ‘mvn test‘
            
            post 
                always 
                    junit ‘target/surefire-reports/*.xml‘ 
                
            
        
        stage(‘Deliver‘)  
            steps 
                sh ‘sh ./jenkins/scripts/deliver.sh‘ 
            
        
    

代码内容很简单,分为三段:

1. 打包
2. 测试
3. 发布

重点关注下 第三个 发布是通过出一个脚本来实现的。因此这个目录和脚本必须也放置到 git 仓库。 将 jenkins pipeline 配置文件和脚本放置到 git仓库,这样更易于维护,而且对 jenkins 的使用会更加灵活。

技术图片

注意脚本放置的目录,脚本内容如下:

#!/bin/bash
# Author: hukey
# date: 2019-07-16 17:23:20
#
function status()
ansible common-api -a "netstat -ntplu"


function update()
  if [ ! -f target/*.jar ];then
      echo ‘[Error]:java.jar not exist, update failed.‘
      exit 1
  fi
  JAR=$(ls target/*.jar)
  ansible ‘common-api‘ -m shell -a ‘adrser/service.sh update‘
  ansible ‘common-api‘ -m copy -a "src=$JAR dest=adrser"


function start()
  ansible ‘common-api‘ -m shell -a ‘adrser/service.sh start‘


update
sleep 3
start

上面的脚本,必须和 app-node 中的脚本对应着来看,简要说下:

首先 执行 update 操作,将 app-node 上的应用程序停止并备份到backup目录,将本地的 jar 程序拷贝到 app-node 节点;

再次 通过 start 将 app-node 上的程序启动起来。

这样一个持续性的流水线工作就完成了。

 

3. 持续集成测试

技术图片

 

点击构建,然后查看后台日志输出信息:

技术图片

技术图片

当返回 SUCCESS 说明构建成功了。也可以通过 Blue Ocean 查看

技术图片

技术图片

到这里, 采用 jenkins 构建 java 项目持续集成已经完毕,这里采用的是手动触发构建,如果需要自动构建可以通过 webHook 来实现。

以上是关于[ jenkins ] git+jenkins+maven + ansible 部署java程序的主要内容,如果未能解决你的问题,请参考以下文章

gitlab+jenkins+maven+docker持续集成——.Jenkins获取git tags代码进行持续集成

Jenkins+git+maven 打包构建部署

jenkins实战安装java maven项目

CentOS7.0 部署Tomcat+jenkins+git+maven+ant

CentOS7.0 部署Tomcat+jenkins+git+maven+ant

怎么提取jenkins git changes的信息