设为首页 收藏本站
查看: 1709|回复: 6

[经验分享] Jenkins + Git + Maven + tomcat集成环境搭建

[复制链接]
累计签到:1 天
连续签到:1 天
发表于 2017-9-1 13:23:17 | 显示全部楼层 |阅读模式
折腾了好几天,终于吧Jenkins + Git + Maven + tomcat集成环境搭建起来了,最终主要实现“自动构建、部署”web应用。

1、安装环境
    操作系统:Centos 6.5
    JDK:1.7.x
    Maven:3.1.x
    Git: 1.7.1,自建GitLab平台
    tomcat:7.x

    上述宿主机器2台:192.168.1.194,192,168.1.198,其中194位Jenkins Master,198位slave。

2、第三方安装安装和环境配置
    JDK、Git、Maven、tomcat在上述2个宿主机器上都需要安装,即jenkins master和slave都需要这些环境。
    1)JDK安装:略;安装后之后,请注意配置JAVA_HOME环境变量。
    2)Maven安装:从apache下载tar.gz压缩包,在合适的目录下解压即可。此后配置M2_HOME环境变量。
    3)tomcat安装:略。
    4)Git:安装非常简单,直接执行“yum install git”即可。
    5)如果你的GitLab是自建的内网平台,千万不要忘了在上述2个宿主机器上增加hosts解析,例如:
Java代码  [url=] icon_star.jpg [/url]
  • 192.168.1.110    git.xxx.com  


    上述环境安装,需要在Jenkins和slave上都进行,即slave上也需要JDK、Maven、Git,因为slave接收master的job调度后,将会使用Git从GitLab上同步代码并使用Maven进行build,这个过程都是在salve的本地进行。

    此外,两个宿主机器,还需要安装ssh-keygen等必要软件,同时它们还需要交换public Key,确保2个机器能够实现“无密码登陆”(过程略)。因为Jenkins在ssh传输时无法绕过“授权确认”的手动操作,所以管理员需要人为的进行一次ssh登陆。

3、jenkins  master
    master是job调度的分配者,我们需要首先安装部署它。从“https://jenkins-ci.org/”官网下载jenkins.war部署包,我们将jenkins.war通过tomcat部署,即使用tomcat挂在启动jenkins服务,因为这样我们可以非常简单的修改一些配置参数和维护。(启动jenkins服务的方式还可以通过jar方式启动,请参见其他说明文档)

    将master安装在192.168.1.194机器上,单独安装一个tomcat,其http端口为38080。并修改如下文件:
    1)context.xml:增加jenkins环境变量,由tomcat挂载。
Java代码  [url=] icon_star.jpg [/url]
  • <Context>  
  • ....  
  •     <Environment name="JENKINS_HOME" value="/home/jenkins_home/" type="java.lang.String"/>  
  • </Context>  


    “JENKINS_HOME”是jenkins的home目录,通常设定为“磁盘空间较大”的分区,这个目录中将放置maven build的文件,历史部署记录等等,所以将会消耗很大的存储空间。

    2)tomcat-users.xml:配置jenkins的用户,此后用户可以在jenkins的页面上登录和授权操作,对于jenkins的用户授权,官方提供了很多方式,比如LDAP、基于数据库等等。本实例基于tomcat user的方式,简单易用。
Java代码  [url=] icon_star.jpg [/url]
  • <tomcat-users>  
  •       <role rolename="admin"/>  
  •       <user username="admin" password="admin" roles="admin"/>  
  •       <user username="developer" password="developer" roles="manager"/>  
  • </tomcat-users>  


    添加2个管理员用户,其中admin可以对系统各项配置进行修改,manager可以管理项目、部署等。

    3)将jenkins.war放置在webapps目录下,我们此处希望jenkins作为ROOT项目加载,所以删除原有的ROOT项目,并将jenkins.war重命名位ROOT.war,这样在通过http访问jenkins时,不需要加ContextPath了。

    4)启动jenkins tomcat:./startup.sh
    5)访问“http://192.168.1.194:38080”,然后使用admin用户登录(用户密码参见tomcat-users.xml)。

4、master配置
    如果master需要真正的能够运行job,我们还需要一些周密的配置。

    1)插件管理:
28cae430-9265-3b8b-af24-d636a2224bac.jpg

6fcd4867-2f6a-30e3-b0b7-1e4b1d32fb5b.jpg
  

    jenkins master需要几个常用的插件,在“可选插件”中,建议将如下列表插件选中并安装:

15a77752-235f-3107-9d9c-c4a9b6b16b1b.jpg

9ee083ec-de29-3bca-a218-7369c64f8508.jpg
    这些插件主要涉及到:ssh、Git、GitLab、Maven,已经后面我们需要提到的“deploy”插件。管理员可以根据需要选择性的安装需要的plugins。

    安装完之后,重启jenkins。

5、 系统配置
    在jenkins的“系统管理”-->“系统设置”页面,来设定master全局的配置,其中重要的2个选项位JDK和Maven,我们需要告知master它们安装在何处。

    1)JDK:

51e5a1a9-e34e-3082-a0f4-cf3326008220.jpg
    2)Maven:

aeef34e7-f330-38ec-9edb-2b7b0facb9b1.jpg


6、Build与发布
    我们接下来创建一个job,这个job将从GitLab上下载源码到本地,然后使用Maven build和打包,并发布到tomcat上。这个过程正是我们常用的。

    1)“Deploy to container plugin”:这个插件我们在上述已经看到,如果还没有安装,请首先安装;它主要用来将“war”文件“deploy/redeploy”到web容器中,比如tomcat、jboss等。有了这个插件,我们可以在maven build之后,立即将war发布到tomcat中,而不需要手动操作或者写shell脚本来copy文件。

    首先,我们需要准备一个tomcat,用来部署我们的web application,过程略。此tomcat的端口为8080,部署在master宿主机器上。

    因为Deploy插件是通过外部(http)方式“deploy/redeploy”,所以需要在tomcat上进行用户授权。编辑tomcat-users.xml,增加如下配置:
Java代码  [url=] icon_star.jpg [/url]
  • <tomcat-users>  
  •     <role rolename="manager"/>  
  •     <role rolename="admin"/>  
  •     <user username="deployer" password="deployer" roles="standard,manager,admin,manager-script" />  
  • </tomcat-users>  


    增加一个“deployer”用户,我们可以通过tomcat manager机制来部署war。参见稍后讲解。

    2)新建Item:

    授权与验证:master需要ssh访问slave机器(部署、启动,发送文件等),以及从git上下载代码,所以我们在开始之前,需要指定这些。“jenkins”-->“Credentials”-->“Add Credentials”添加一个SSH验证规则:

02490f7b-9020-3885-9a4f-7d91b378266c.jpg


    我们创建一个Global范围的SSH无密码登陆,这个可以在此后master与slave通讯有用。前提是master与slave已经交换了public key。“From the Jenkins master ~/.ssh”即使用master宿主机器“~/.ssh”目录下的公私钥。
    然后,我们“新建”:

c1d4a936-df5b-3346-98d0-32e5e2df48ed.jpg

    因为我们是基于Maven构建项目,所以选择第二项,如果你已经创建过类似的item,可以选择“复制已有的item”,输入item的名字,那么它相应的配置就会导入,就像模板一样,我们无需每次都重复填写配置表单。

    在创建item时,我们还需要指定,这个item的job运行结果最终保存在哪个“节点”上,例如web项目最终发布在哪个server上,在jenkins中,master和slaver都称为“节点”。

c5bb00a2-ad6f-34ce-ba3f-7d8e4598e34b.jpg

    指定Git库的地址,并配置master与GitLab通讯的SSH验证机制:

e07c49a3-dd4a-355b-b5b6-21a2fffe25a3.jpg
    因为master、slave均需要使用Git从远端下载代码,在这个模块中,“Credentials”选择刚才我们添加的“root”,这样jenkins使用Git下载代码时将会把SSH的秘钥发过去。此外,我们还需要在GitLab中目标项目中增加“deploy key”:

fe64a578-fda0-3b84-b906-fb2a3270916b.jpg
     我们将master、slave两个机器的public key添加到GitLab项目的“deploy key”中。如果你的item无法正确访问Git,比如“验证被拒绝”,你应该尝试通过shell登录到master、slave机器上,使用git命令尝试下载项目代码,可能因为jenkins无法跳过ssh的“授权确认”导致。

    当代码从Git下载之后,启动Maven build阶段:

82cd668a-4e20-3078-bc57-378c4f538682.jpg

     在“Pre step”中,我们增加了一小段shell,主要作用就是在发布之前,先删除web应用的tomcat中原有的ROOT.war(在某些版本的tomcat,还需要增加一行“rm -r -f ROOT”,即将原有项目的所有文件删除,才能触发tomcat undeploy操作),这或许是“Deploy plugin”的bug,如果ROOT.war已经存在,则无法再次deploy/redeploy。
    在Maven build时,我们指定“Goals”,这个很重要,否则Maven build就没有意义了。“Goals and options”根据个人项目的情况来定义,选择合适的profile环境。

    下面我们介绍“Deploy plugin”,这个插件就是将Maven打包生成的war,发布到指定的tomcat下。很好的一个插件。

ddd83ce6-b069-3ed9-9de9-778e389e69e1.jpg
    其中“WAR/EAR files”选项指定war的位置,这个路径是个相对路径,相对于“/home/jenkins_home/workspace/{你的item名称}”,本实例是一个maven多模块项目,且每个module打包的名称都为ROOT.war,这样方便部署。 请管理员指定正确的路径。
    Containers中,我们使用了tomcat 7,输入上文我们设定的用户名和密码,指定tomcat Url,需要注意,既然应用是基于http manager的方式deploy,那么此tomcat的webapps自带的“manager”项目不能被删除,同时tomcat还需要处于启动状态。(tomcat也可能以为死亡,所以建议在pre step中加上对tomcat状态的判断,如果tomcat死亡,先执行startup.sh)。

    如果在部署时,报错。请按照如下方式排查:
    1)tomcat是否已经启动。
    2)tomcat-users.xml是否配置正确。
    3)tomcat的版本和“Deploy plugin”中container指定的是否一致。
    4)tomcat下是否已经有ROOT项目,如果有,请删除,然后重启tomcat,此后再使用jenkins发布,因为reploy时会检测旧的ROOT和新的ROOT.war项目的版本相容性,如果不同,则会导致reploy失败。


    到此为止,第一个item配置完毕,保存后即可通过“立即构建”来部署我们的项目了。

7、Slave节点
    通过上文,我们已经在Slave机器上安装好了SSH、Git、Maven、JDK等,同时我们也需要在Slave节点安装一个tomcat,用来部署web application。
    需要注意的是,jenkins的slave不需要像master一样部署在tomcat上,我们只需要在jenkins的页面上操作即可,master将会通过ssh将slave.jar文件到slave节点上,并启动slave。
    通过导航:“系统管理”-->“节点管理”-->“新建节点”,来增加slave。其实此时我们已经看到“master”节点已经被默认添加进来了。

59447827-0144-3320-81a3-17d25c9bc3e9.jpg
    保存后,会提示你“启动slave”,你可以根据需要是否启动slave。

    此后那些需要部署在slave宿主机器上的web应用,只需要在创建item时指定“Restrict where project can be run”为slave即可。

---END---

other:   profile
各属性节点的值,用占位符"${属性名}"占位,maven在compile/package时,会根据profile的环境自动替换这些占位符为实际属性值。
默认情况下:
maven package
将采用默认激活的profile环境来打包,也可以手动指定环境,比如:
maven package -P dev
将自动打包成dev环境的部署包(注:参数P为大写)

gitlab/github可以添加Webhooks实现自动部署
如果是springboot项目,则配置更简单

40ffff35-5e28-3d5d-9cd3-41ff2ed2880d.jpg

921d036a-e21d-3c89-9025-7cdbd5a87632.jpg


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-403806-1-1.html 上篇帖子: github创建远程仓库和git常用命令 下篇帖子: GitLab 9.5.3 发布,代码托管平台
累计签到:24 天
连续签到:1 天
发表于 2017-9-3 21:10:32 | 显示全部楼层
啊时代发生的发生地方

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表