Jenkins部署python项目

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Jenkins部署python项目相关的知识,希望对你有一定的参考价值。

参考技术A 写了一些脚本,每天都要跑一次,手动排有的时候会忘记,需要数据的时间也比较早,于是想到用Jenkins设置定时任务,在固定时间每天跑数据,不会因为人为疏忽忘记造数据。

如果Jenkins服务没有打开,直接访问 http://localhost:8080/ ,会报无法访问次网站

通过Jenkins部署java项目

笔记内容:通过Jenkins部署java项目
笔记日期:2018-02-28

  • 26.9 部署java项目-创建私有仓库
  • 26.10 部署java项目-下载zrlog源码
  • 26.11 安装配置tomcat
  • 26.12 部署java项目-安装maven
  • 26.13 安装插件
  • 26.14 构建job
  • 26.15 发布war包

部署java项目-创建私有仓库

Jenkins大多数情况下都是用来部署Java项目,Java项目有一个特点是需要编译和打包的,一般情况下编译和打包都是用maven完成,所以系统环境中需要安装maven。

本次实验,我们采用git私有仓库的形式,涉及到配置密钥,以zrlog来作为本次实验需要部署的java项目。

实验环境:

  • 192.168.77.128 作为项目的线上服务器,具有JDK1.8+Tomcat8.5环境
  • 192.168.77.130 Jenkins服务器

准备工作:

  • 自行在免费的代码托管平台申请一个私有的git仓库,我这里使用的是国内的一个免费托管平台:码云
  • 生成密钥对,把公钥放到git服务端,也就是配置仓库的密钥认证,常规操作就不演示了

克隆创建好的私有仓库:

[[email protected] ~]# cd /home/
[[email protected] /home]# git clone [email protected]:Zero-One/Test-Zrlog.git
[[email protected] /home]# cd Test-Zrlog/
[[email protected] /home/Test-Zrlog]# ls
README.md
[[email protected] /home/Test-Zrlog]# vim README.md  // 随便更改一下内容
[[email protected] /home/Test-Zrlog]# git add .
[[email protected] /home/Test-Zrlog]# git commit -m "first"
[[email protected] /home/Test-Zrlog]# git push

push成功则代表没问题。


部署java项目-下载zrlog源码

下载zrlog的源码,并解压:

[[email protected] /home/Test-Zrlog]# cd ../
[[email protected] /home]# wget https://codeload.github.com/94fzb/zrlog/zip/master
[[email protected] /home]# du -sh master 
2.1M    master
[[email protected] /home]# unzip master

然后把解压后的文件都移到git仓库里,并提交到远程仓库上:

[[email protected] /home]# mv zrlog-master/* Test-Zrlog/
mv: overwrite ‘Test-Zrlog/README.md’? y
[[email protected] /home]# cd Test-Zrlog/
[[email protected] /home/Test-Zrlog]# git add .
[[email protected] /home/Test-Zrlog]# git commit -m "zrlog source"
[[email protected] /home/Test-Zrlog]# git push

配置tomcat

在线上服务器上需要安装好jdk + tomcat,其中jdk最好不要使用openjdk,使用openjdk容易出问题,我这里使用的jdk版本为1.8,tomcat版本则为8.23。

准备好JDK+Tomcat环境并且Tomcat能够正常服务后,还需要配置Tomcat的用户文件:

[[email protected] ~]# vim /usr/local/tomcat/conf/tomcat-users.xml  # 在文件末尾加入以下内容
    <role rolename="admin"/>  # role配置角色
    <role rolename="admin-gui"/>
    <role rolename="admin-script"/>
    <role rolename="manager"/>
    <role rolename="manager-gui"/>
    <role rolename="manager-script"/>
    <role rolename="manager-jmx"/>
    <role rolename="manager-status"/> 
    <user name="admin" password="your_password" roles="admin,manager,admin-gui,admin-script,manager-gui,manager-script,manager-jmx,manager-status" />  # user配置用户及用户的角色
</tomcat-users>  # 注意以上内容是写在tomcat-users标签内的

接着配置Tomcat的Context文件,只需要配置白名单ip即可,不然默认只允许本地ip访问:

[[email protected] ~]# vim /usr/local/tomcat/webapps/manager/META-INF/context.xml
<Context antiResourceLocking="false" privileged="true" >
  <Valve className="org.apache.catalina.valves.RemoteAddrValve"
         allow="127\.\d+\.\d+\.\d+|::1|0:0:0:0:0:0:0:1|192.168.77.*" />  # 这里可以根据你自己的机器ip进行配置
  <Manager sessionAttributeValueClassNameFilter="java\.lang\.(?:Boolean|Integer|Long|Number|String)|org\.apache\.catalina\.filters\.CsrfPreventionFilter\$LruCache(?:\$1)?|java\.util\.(?:Linked)?HashMap"/>
</Context>

完成以上编辑后,重启tomcat:

[[email protected] ~]# sh /usr/local/tomcat/bin/shutdown.sh
[[email protected] ~]# sh /usr/local/tomcat/bin/startup.sh

打开浏览器进入到Tomcat的web页面,然后点击 “manager webapp” 进入到管理页面:
技术分享图片
技术分享图片

然后会进入到管理页面:
技术分享图片

在这个页面我们可以对发布的web项目进行管理,而且Jenkins也需要通过这个管理页面的接口来发布我们的Java项目,所以才需要配置这个管理页面的用户及白名单ip。


部署java项目-安装maven

因为我们需要通过maven来帮我们编译并打包Java项目,所以这一步是安装好maven,注意这一步是在Jenkins服务器上完成的,官网下载地址:

https://maven.apache.org/download.cgi

下载并解压:

[[email protected] ~]# cd /usr/local/
[[email protected] /usr/local]# wget  http://mirror.bit.edu.cn/apache/maven/maven-3/3.5.2/binaries/apache-maven-3.5.2-bin.tar.gz
[[email protected] /usr/local]# tar -zxvf apache-maven-3.5.2-bin.tar.gz 
[[email protected] /usr/local]# rm -rf apache-maven-3.5.2-bin.tar.gz
[[email protected] /usr/local]# ls apache-maven-3.5.2/
bin  boot  conf  lib  LICENSE  NOTICE  README.txt
[[email protected] /usr/local]# apache-maven-3.5.2/bin/mvn --version
Apache Maven 3.5.2 (138edd61fd100ec658bfa2d307c43b76940a5d7d; 2017-10-18T15:58:13+08:00)
Maven home: /usr/local/apache-maven-3.5.2
Java version: 1.8.0_111, vendor: Oracle Corporation
Java home: /usr/lib/jvm/java-1.8.0-openjdk-1.8.0.111-1.b15.el7_2.x86_64/jre
Default locale: zh_CN, platform encoding: UTF-8
OS name: "linux", version: "3.10.0-327.el7.x86_64", arch: "amd64", family: "unix"
[[email protected] /usr/local]# 

安装完成后,到Jenkins的web页面上进行配置,jenkins页面 -> 系统管理 -> 全局工具配置:

先配置maven的setting.xml文件的路径:
技术分享图片

然后往下拉,找到Maven那一栏,配置maven的安装路径:
技术分享图片
技术分享图片

点击 “Saven” 之后,我们的maven也就配置完了


安装插件

系统管理 -> 管理插件,检查是否已经安装 Maven Integration和 Deploy to container,若没有安装则需要安装这两个插件:

  • 安装Maven Integration:
    技术分享图片

  • 安装Deploy to container:
    技术分享图片

安装完成:
技术分享图片

Maven Integration是用于构建Maven项目的,而Deploy to container则是用于发布远程war包的。

如果没有安装Maven Integration的话,构建任务时是没有Maven项目的选项的:
技术分享图片

重启Jenkins服务:

systemctl restart jenkins

然后点击 “新建任务” ,这时会发现多了一个Maven项目的选项,这就证明maven插件安装成功了:
技术分享图片


构建job

点击 “新建任务” ,创建一个Maven项目:
技术分享图片

填写项目信息:
技术分享图片

源码管理,配置远程的私有git仓库:
技术分享图片
技术分享图片
技术分享图片

构建触发器、构建环境、Pre Steps这几项保持默认节即可,

然后配置Build那一栏,Build的过程是在编译源码并打包:
技术分享图片

接下来的Post Steps以及构建设置这两项也保持默认。

构建后操作需要配置,这一步我这里目前只是配置一下邮件通知,目的是先进行测试能否成功构建Maven项目,测试成功后一会再配置发布war包:
技术分享图片
技术分享图片

配置完保存之后,就可以点击立即构建来构建这个maven项目了,我这里是构建成功的:
技术分享图片

而且邮箱也成功收到了邮件通知:
技术分享图片

这时进入控制台输出页面,由于是第一次构建Maven的项目,所以会看到下载了很多Maven相关的东西:
技术分享图片

而第二、第三次构建Maven的项目就不会再下载这么多东西了,如上我们的测试构建Maven项目就成功了,接下来就可以远程发布war包了。


发布war包

回到项目的配置,在构建后操作那一栏点击 “增加构建后操作步骤” 选择 “Deploy war/ear to a container” :
技术分享图片

Containers选择Tomcat 8.x,Tomcat URL填写要把war包发布到的那台机器的url:
技术分享图片
技术分享图片

Credentials这里需要点击右侧的Add,添加用户名和密码:
技术分享图片
技术分享图片

配置完之后点击保存即可。

然后就可以构建任务了,我这里是构建成功的:
技术分享图片

并且也收到了邮件通知:
技术分享图片

这时候到目标机器上,看看war包是否已发布到tomcat上了:

[[email protected] ~]# ls /usr/local/tomcat/webapps/
docs  examples  host-manager  manager  ROOT  zrlog-1.9.0  zrlog-1.9.0.war
[[email protected] ~]# 

如上,可以看到war已成功发布到tomcat上了。

浏览器上也成功登录了zrlog:
技术分享图片

到此为止,我们的Java项目就发布成功了。

以上是关于Jenkins部署python项目的主要内容,如果未能解决你的问题,请参考以下文章

Jenkins部署Python项目实战

jenkins部署python项目步骤

Jenkins部署git+python项目实现持续集成

Jenkins部署python项目时,提示找不到自己定义的模块包的问题

python自动化持续集成:5.Jenkins集成Spring Boot项目源码打包部署流程

Jenkins+python+selenium持续继承自动化测试