-
jenkins分布式的作用
当一个持续集成系统非常庞大的时候,一台持续集成系统是无法完成大批量的job的,所以利用分布式的Jenkins应用就可以解决这样的问题
-
jenkins分布式框架的原理
对于jenkins的分布式框架,大家可以简单的理解为server-client模式,在jenkins中是Master-slave,也就是一个主的server叫Master,其他的子client都是slave,所以以后我们说slave就是指的一个一个的客户端,而master就是指的主机。
Master的作用:负责分发job任务的。把job分配给某个或者某几个slave来工作。
Slave的作用:负责干活的,也就是do job的。一个一个的客户端来真正运行Master给我们的任务。
-
动手操作
1.Master配置
打开Jenkins的web页面,在‘系统管理’-‘管理节点’中点击‘新建节点’
启动方法Launch method:控制hudson怎么开始这个slave:
Launch slave agents on Unix machines via SSH // master通过ssh来启动slave
Launch slave agents via Java Web Start //通过Java web start来启动slave
Launch slave via execution of command on the Master //实现自己的脚本来启动slave
Let Jenkins control this Windows slave as a Windows service // master通过WMI+DCOM来启动windows slave
Availability:控制hudson启动和停止slave
Keep this slave on-line as much as possible //尽可能多的在线
Take this slave on-line and off-line at specific times //在特定的时间启动和停止运行
Take this slave on-line when in demand and off-line when idle //当空闲时从上线时的需求和离线
点击保存
然后会看到如图所示:
可以看到如下两种方式来启动agent,其实就是把master和slave连接到一起。
- Launch agent from browser
下载一个jnlp文件,把这个文件复制到slave机器,然后运行。或者在slave机器上通过浏览器访问当前页面,直接下载到slave上。 - Run from agent command line
直接通过java的命令号启动jnlp。点击带下划线的超链接slave.jar,把slave.jar下载到slave本地的某个目录下,然后通过这个java命令来启动:java -jar slave.jar -jnlpUrl http://127.0.0.1:8080/computer/test_bat_on_164/slave-agent.jnlp -secret 4108138a31a3435b7b5333ad570ba81f5d23c300530e5fb5f440f82ab84cbf09
说白了,这两种方式都是通过java来启动jnlp
这里有个重点的问题需要讲解
那就是这个jnlp文件,因为默认的jnlp文件里的内容是
<jnlp spec="1.0+" codebase="http://127.0.0.1:8080/computer/test_bat_on_164/"><information><title>Agent for test_bat_on_164</title><vendor>Jenkins project</vendor><homepage href="https://jenkins-ci.org/"/></information><security><all-permissions/></security><resources><j2se version="1.7+"/><jar href="http://127.0.0.1:8080/jnlpJars/remoting.jar"/></resources><application-desc main-class="hudson.remoting.jnlp.Main"><argument>4108138a31a3435b7b5333ad570ba81f5d23c300530e5fb5f440f82ab84cbf09</argument><argument>test_bat_on_164</argument><argument>-url</argument><argument>http://127.0.0.1:8080/</argument><argument>-url</argument><argument>http://localhost:8080/jenkins/</argument></application-desc></jnlp>
注意看里面加粗的ip地址,和我们使用的ip地址有区别:
- 要修改jnlp中的ip地址为master的地址,比如10.200.0.185
- 默认的地址栏是
http://127.0.0.1:8080/computer/test_bat_on_164/
而真正的地址是
http://localhost:8080/jenkins/computer/test_bat_on_164/
中间缺少一个jenkins,所以这点大家一定要注意,否则jenkins的slave可能连接不成功。这是因为我用的jenkins是下载的jenkins的war包,直接放入到tomcat中的,那么在comcat中,jenkins就是项目名。
总结:
- jnlp文件最好不要去换行,可能会遇到未知的问题
- ip地址一定要注意
- 是否有项目名jenkins
2.Slave配置
把下载好的slave-agent.jnlp文件放入到slave的机器上,然后用记事本打开这个jnlp,让编辑器自动换行
按上面大家要注意的jnlp文件的改法进行修改。
- jnlp文件最好不要去换行,可能会遇到未知的问题
- ip地址一定要注意
- 是否有项目名jenkins
修改后的结果应该类似这样
<jnlp spec="1.0+" codebase="http://10.200.0.185:8080/jenkins/computer/test_bat_on_164/"><information><title>Agent for test_bat_on_164</title><vendor>Jenkins project</vendor><homepage href="https://jenkins-ci.org/"/></information><security><all-permissions/></security><resources><j2se version="1.7+"/><jar href="http://10.200.0.185:8080/jenkins/jnlpJars/remoting.jar"/></resources><application-desc main-class="hudson.remoting.jnlp.Main"><argument>4108138a31a3435b7b5333ad570ba81f5d23c300530e5fb5f440f82ab84cbf09</argument><argument>test_bat_on_164</argument><argument>-url</argument><argument>http://10.200.0.185:8080/jenkins</argument><argument>-url</argument><argument>http://10.200.0.185:8080/jenkins/</argument></application-desc></jnlp>
双击运行这个jnlp,如果没有正确的打开方式,请安装jdk。打开方式选择Java Web Start Launcher
这时候我们打开master上节点页面,会发现test_bat_on_164节点已经成功连接了(没有红叉了)
但是有一个时钟不同步的问题,因为jenkins要求集群中的每台电脑的时间都应该是同步的。
解决把法就是打开时钟设置,同步一下和master一样的timer
slave上的agent只要打开着,master上的jenkins正在运行这,这台slave就被master连接着。但是如果这个slave机器关机了,从起之后呢,我们需要手动的打开,那成百上千台呢?那就累死了。所以我们要可以让slave机器上的agent添加到windows的服务中,当进入系统后,自动开起这个agent。
注:一旦agent进入到服务之后,就不会有界面了,是在后台运行的,那么如果使用的是Selenium这样的浏览器自动化测试,就不会有浏览器打开,所有的打开过程都在后台的内存中进行,是看不到效果的。所以是否要在服务中添加agent,还是看用户的需求。
3. 运行job
我们在jenkins上新建一个项目,比如叫test bat c,在General下勾上Restrict where this project can 被run,选择一个label,这个label就是创建节点时写的标签,这里是bat_run
构建中我们写入
cd c:\jenkins
call c.bat
保存,立即构建
他写的是在远程的test bat on 164 上运行构建,在c:\jekkins>call c.bat
但是我们的slave的c:\jenkins下还是空的,所以不可能调用c.bat
我们在slave的c:\jenkins下新建一个c.bat,里面比如写echo cccc
再来构建
成功了,说明master已经和slave建立了连接,并且运行了slave机器上的一个c.bat脚本。
那以后我们就可以利用这个分布式的方法,让我们jenkins在不同的机器上分别运行多个job,来分担单一构建环境的负担。