码迷,mamicode.com
首页 > Web开发 > 详细

Kubernetes实现Master-Slave分布式构建方案(一)

时间:2020-06-04 01:04:33      阅读:87      评论:0      收藏:0      [点我收藏+]

标签:基础   security   删除   根据   manage   配置   推送   ecb   run   

 Jenkins的Master-Slave分布式构建

什么是Master-Slave分布式构建

技术图片

Jenkins 的Master-Slave分布式构建,就是通过将构建过程分配到从属Slave节点上,从而减轻Master节点的压力,而且可以同时构建多个,有点类似负载均衡的概念。
如何实现Master-Slave分布式构建
1)开启代理程序的TCP端口
Manage Jenkins -> Configure Global Security

技术图片

2)新建节点
Manage Jenkins—Manage Nodes—新建节点

技术图片

 

 技术图片

 

 技术图片

 

 有两种在 Slave节点连接Master节点的方法

技术图片

我们选择第二种:
2)安装和配置节点
下载agent.jar,并上传到Slave节点,然后执行页面提示的命令:

java -jar agent.jar -jnlpUrl http://192.168.66.101:8888/computer/slave1/slave-
agent.jnlp -secret
f2ecbb99e0c81331e8b7a7917a94d478f39cb9763fc6c66d9a9741c61f9ae6d6 -workDir
"/root/jenkins"

刷新页面

技术图片

 

 

3)测试节点是否可用
自由风格和Maven风格的项目:

技术图片

 

 流水线风格的项目:

ode(‘slave1‘) {
 stage(‘check out‘) {
    checkout([$class: ‘GitSCM‘, branches: [[name: ‘*/master‘]],
doGenerateSubmoduleConfigurations: false, extensions: [], submoduleCfg: [],
userRemoteConfigs: [[credentialsId: ‘68f2087f-a034-4d39-a9ff-1f776dd3dfa8‘, url:
‘git@192.168.66.100:itheima_group/tensquare_back_cluster.git‘]]])
 }
}

传统Jenkins的Master-Slave方案的缺陷

  1. Master 节点发生单点故障时,整个流程都不可用了
  2. 每个 Slave节点的配置环境不一样,来完成不同语言的编译打包等操作,但是这些差异化的配置导致管理起来非常不方便,维护起来也是比较费劲
  3. 资源分配不均衡,有的 Slave节点要运行的job出现排队等待,而有的Slave节点处于空闲状态
  4. 资源浪费,每台 Slave节点可能是实体机或者VM,当Slave节点处于空闲状态时,也不会完全释放掉资源

以上种种问题,我们可以引入Kubernates来解决!

 Kubernates简介

Kubernetes (简称,K8S)是Google开源的容器集群管理系统,在Docker技术的基础上,为容器化的
应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能,提高了大规模容器集群管理的便捷性。 其主要功能如下:

  1. 使用Docker对应用程序包装(package)、实例化(instantiate)、运行(run)。
  2. 以集群的方式运行、管理跨机器的容器。以集群的方式运行、管理跨机器的容器。
  3. 解决 Docker跨机器容器之间的通讯问题。解决Docker跨机器容器之间的通讯问题。
  4. Kubernetes 的自我修复机制使得容器集群总是运行在用户期望的状态。

 技术图片

 

 技术图片

 

 

大致工作流程:手动 /自动构建 -> Jenkins 调度 K8S API ->动态生成 Jenkins Slave pod -> Slave pod
拉取 Git 代码/编译/打包镜像 ->推送到镜像仓库 Harbor -> Slave 工作完成,Pod 自动销毁 ->部署
到测试或生产 Kubernetes平台。(完全自动化,无需人工干预)

Kubernates+Docker+Jenkins持续集成方案好处
服务高可用 :当 Jenkins Master 出现故障时,Kubernetes 会自动创建一个新的 Jenkins Master容器,并且将 Volume 分配给新创建的容器,保证数据不丢失,从而达到集群服务高可用。

动态伸缩,合理使用资源 :每次运行 Job 时,会自动创建一个 Jenkins Slave,Job 完成后,Slave自动注销并删除容器,资源自动释放,而且 Kubernetes 会根据每个资源的使用情况,动态分配
Slave 到空闲的节点上创建,降低出现因某节点资源利用率高,还排队等待在该节点的情况。

扩展性好:当 Kubernetes 集群的资源严重不足而导致 Job 排队等待时,可以很容易的添加一个Kubernetes Node 到集群中,从而实现扩展。

Kubernetes实现Master-Slave分布式构建方案(一)

标签:基础   security   删除   根据   manage   配置   推送   ecb   run   

原文地址:https://www.cnblogs.com/dalianpai/p/13040827.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!