美文网首页Jenkins
Jenkins的分布式应用

Jenkins的分布式应用

作者: 幽灵小子 | 来源:发表于2017-07-31 17:32 被阅读668次

  • jenkins分布式的作用

当一个持续集成系统非常庞大的时候,一台持续集成系统是无法完成大批量的job的,所以利用分布式的Jenkins应用就可以解决这样的问题

  • jenkins分布式框架的原理

对于jenkins的分布式框架,大家可以简单的理解为server-client模式,在jenkins中是Master-slave,也就是一个主的server叫Master,其他的子client都是slave,所以以后我们说slave就是指的一个一个的客户端,而master就是指的主机。
Master的作用:负责分发job任务的。把job分配给某个或者某几个slave来工作。
Slave的作用:负责干活的,也就是do job的。一个一个的客户端来真正运行Master给我们的任务。

  • 动手操作

1.Master配置

打开Jenkins的web页面,在‘系统管理’-‘管理节点’中点击‘新建节点’

系统管理
管理节点
新建节点
为节点命名 节点说明

启动方法Launch method:控制hudson怎么开始这个slave:

Launch slave agents on Unix machines via SSH              // master通过ssh来启动slave
Launch slave agents via Java Web Start                  //通过Java web start来启动slave
Launch slave via execution of command on the Master           //实现自己的脚本来启动slave
Let Jenkins control this Windows slave as a Windows service               // master通过WMI+DCOM来启动windows slave

Availability:控制hudson启动和停止slave

 Keep this slave on-line as much as possible            //尽可能多的在线
 Take this slave on-line and off-line at specific times                //在特定的时间启动和停止运行
 Take this slave on-line when in demand and off-line when idle             //当空闲时从上线时的需求和离线

点击保存

然后会看到如图所示:

agent连接方式

可以看到如下两种方式来启动agent,其实就是把master和slave连接到一起。

  • Launch agent from browser
    下载一个jnlp文件,把这个文件复制到slave机器,然后运行。或者在slave机器上通过浏览器访问当前页面,直接下载到slave上。
  • Run from agent command line
    直接通过java的命令号启动jnlp。点击带下划线的超链接slave.jar,把slave.jar下载到slave本地的某个目录下,然后通过这个java命令来启动:java -jar slave.jar -jnlpUrl http://127.0.0.1:8080/computer/test_bat_on_164/slave-agent.jnlp -secret 4108138a31a3435b7b5333ad570ba81f5d23c300530e5fb5f440f82ab84cbf09

说白了,这两种方式都是通过java来启动jnlp

这里有个重点的问题需要讲解

那就是这个jnlp文件,因为默认的jnlp文件里的内容是
<jnlp spec="1.0+" codebase="http://127.0.0.1:8080/computer/test_bat_on_164/"><information><title>Agent for test_bat_on_164</title><vendor>Jenkins project</vendor><homepage href="https://jenkins-ci.org/"/></information><security><all-permissions/></security><resources><j2se version="1.7+"/><jar href="http://127.0.0.1:8080/jnlpJars/remoting.jar"/></resources><application-desc main-class="hudson.remoting.jnlp.Main"><argument>4108138a31a3435b7b5333ad570ba81f5d23c300530e5fb5f440f82ab84cbf09</argument><argument>test_bat_on_164</argument><argument>-url</argument><argument>http://127.0.0.1:8080/</argument><argument>-url</argument><argument>http://localhost:8080/jenkins/</argument></application-desc></jnlp>

注意看里面加粗的ip地址,和我们使用的ip地址有区别:


地址栏
  1. 要修改jnlp中的ip地址为master的地址,比如10.200.0.185
  2. 默认的地址栏是
    http://127.0.0.1:8080/computer/test_bat_on_164/
    而真正的地址是
    http://localhost:8080/jenkins/computer/test_bat_on_164/
    中间缺少一个jenkins,所以这点大家一定要注意,否则jenkins的slave可能连接不成功。这是因为我用的jenkins是下载的jenkins的war包,直接放入到tomcat中的,那么在comcat中,jenkins就是项目名。

总结:

  1. jnlp文件最好不要去换行,可能会遇到未知的问题
  2. ip地址一定要注意
  3. 是否有项目名jenkins

2.Slave配置

把下载好的slave-agent.jnlp文件放入到slave的机器上,然后用记事本打开这个jnlp,让编辑器自动换行
按上面大家要注意的jnlp文件的改法进行修改。

  1. jnlp文件最好不要去换行,可能会遇到未知的问题
  2. ip地址一定要注意
  3. 是否有项目名jenkins

修改后的结果应该类似这样

<jnlp spec="1.0+" codebase="http://10.200.0.185:8080/jenkins/computer/test_bat_on_164/"><information><title>Agent for test_bat_on_164</title><vendor>Jenkins project</vendor><homepage href="https://jenkins-ci.org/"/></information><security><all-permissions/></security><resources><j2se version="1.7+"/><jar href="http://10.200.0.185:8080/jenkins/jnlpJars/remoting.jar"/></resources><application-desc main-class="hudson.remoting.jnlp.Main"><argument>4108138a31a3435b7b5333ad570ba81f5d23c300530e5fb5f440f82ab84cbf09</argument><argument>test_bat_on_164</argument><argument>-url</argument><argument>http://10.200.0.185:8080/jenkins</argument><argument>-url</argument><argument>http://10.200.0.185:8080/jenkins/</argument></application-desc></jnlp>

双击运行这个jnlp,如果没有正确的打开方式,请安装jdk。打开方式选择Java Web Start Launcher

启动运行程序 运行成功

这时候我们打开master上节点页面,会发现test_bat_on_164节点已经成功连接了(没有红叉了)

节点列表

但是有一个时钟不同步的问题,因为jenkins要求集群中的每台电脑的时间都应该是同步的。
解决把法就是打开时钟设置,同步一下和master一样的timer

同步时间

slave上的agent只要打开着,master上的jenkins正在运行这,这台slave就被master连接着。但是如果这个slave机器关机了,从起之后呢,我们需要手动的打开,那成百上千台呢?那就累死了。所以我们要可以让slave机器上的agent添加到windows的服务中,当进入系统后,自动开起这个agent。
注:一旦agent进入到服务之后,就不会有界面了,是在后台运行的,那么如果使用的是Selenium这样的浏览器自动化测试,就不会有浏览器打开,所有的打开过程都在后台的内存中进行,是看不到效果的。所以是否要在服务中添加agent,还是看用户的需求。

安装服务

3. 运行job

我们在jenkins上新建一个项目,比如叫test bat c,在General下勾上Restrict where this project can 被run,选择一个label,这个label就是创建节点时写的标签,这里是bat_run

选择一个label

构建中我们写入
cd c:\jenkins
call c.bat
保存,立即构建

错误提示

他写的是在远程的test bat on 164 上运行构建,在c:\jekkins>call c.bat
但是我们的slave的c:\jenkins下还是空的,所以不可能调用c.bat
我们在slave的c:\jenkins下新建一个c.bat,里面比如写echo cccc
再来构建

成功了

成功了,说明master已经和slave建立了连接,并且运行了slave机器上的一个c.bat脚本。

那以后我们就可以利用这个分布式的方法,让我们jenkins在不同的机器上分别运行多个job,来分担单一构建环境的负担。

相关文章

  • 12. Jenkins分布式和Pipeline

    1 Jenkins分布式 1.1 Jenkins分布式的使用场景 在众多 Job 的场景下,单台 jenkins ...

  • Jenkins的分布式应用

    jenkins分布式的作用 当一个持续集成系统非常庞大的时候,一台持续集成系统是无法完成大批量的job的,所以利用...

  • vagrant ubuntu box connect jenki

    情景描述 使用jenkins的分布式构建 设置ubuntu分别作为jenkins master service以及...

  • vagrant ubuntu box connect jenki

    情景描述 使用jenkins的分布式构建 设置ubuntu分别作为jenkins master service以及...

  • jenkins--slave节点

    Jenkins的分布式构建,在Jenkins的配置中叫做节点,分布式构建能够让同一套代码或项目在不同的环境(如:W...

  • jenkins--slave节点

    Jenkins的分布式构建,在Jenkins的配置中叫做节点,分布式构建能够让同一套代码或项目在不同的环境(如:W...

  • Jenkins构建maven

    Jenkins安装Jenkins构建androidJenkins构建mavenJenkins构建nodejs应用发...

  • Jenkins安装

    Jenkins安装Jenkins构建androidJenkins构建mavenJenkins构建nodejs应用发...

  • Jenkins权限管理

    Jenkins安装Jenkins构建androidJenkins构建mavenJenkins构建nodejs应用发...

  • Jenkins构建nodejs应用发布到nginx

    Jenkins安装Jenkins构建androidJenkins构建mavenJenkins构建nodejs应用发...

网友评论

    本文标题:Jenkins的分布式应用

    本文链接:https://www.haomeiwen.com/subject/fglrlxtx.html