[系统集成] 基于Kubernetes 部署 jenkins 并动态分配资源

时间：2016-08-27 11:09:30 阅读：665 评论：0 收藏：0 [点我收藏+]

标签：

基于kubernetes 部署 jenkins master 比较简单，难点是为 jenkins 动态分配资源。基于kubernetes 为 jenkins 动态分配资源需要实现下述功能：

资源分配：jenkins 根据任务属性自动创建临时 docker 容器，并作为 slave 节点加入 jenkins 集群，实现资源的分配；
资源释放：任务执行结束后，jenkins 自动删除相关节点，并销毁相关 docker 容器，实现资源的释放；

整个资源分配和资源释放过程对用户来说是透明的，用户只需要创建好任务就可以了，不需要操作节点；对于jenkins来说，slave 节点（容器）是临时的，任务一结束就会销毁。

为了实现数据持久化，建议把需要持久化的数据挂载到 NFS 或 glusterfs卷上。

1. 准备 docker 镜像

#jenkins master

jenkins:2.7.2

#jenkins slave

jenkinsci/jnlp-slave:2.52

2. 部署 jenkins master

分别部署 controller, service, ingress，controller 控制 master 容器，ingress 提供用户访问入口。

 1 kind: Deployment
 2 metadata:
 3   name: jenkins
 4 spec:
 5   replicas: 1
 6   strategy:
 7     type: RollingUpdate
 8     rollingUpdate:
 9       maxSurge: 2
10       maxUnavailable: 0
11   template:
12     metadata:
13       labels:
14         app: jenkins
15     spec:
16       imagePullSecrets:
17       - name: myregistrykey
18       containers:
19       - name: jenkins
20         image: registry.gkkxd.com/jenkins:2.7.2
21         imagePullPolicy: IfNotPresent
22         ports:
23         - containerPort: 8080
24           name: web
25           protocol: TCP
26         - containerPort: 50000
27           name: agent
28           protocol: TCP
29         volumeMounts:
30         - name: jenkinshome
31           mountPath: /var/jenkins_home
32         env:
33         - name: JAVA_OPTS
34           value: "-Duser.timezone=Asia/Shanghai"
35       volumes:
36       - name: jenkinshome
37         nfs:
38           server: 172.31.17.74
39           path: "/var/nfsshare/k8s/jenkins/home"

 1 kind: Service
 2 apiVersion: v1
 3 metadata:
 4   labels:
 5       app: jenkins
 6   name: jenkins
 7 spec:
 8   ports:
 9   - port: 8080
10     targetPort: 8080
11     name: web
12   - port: 50000
13     targetPort: 50000
14     name: agent
15   selector:
16     app: jenkins

 1 kind: Ingress
 2 metadata:
 3   name: jenkins
 4 spec:
 5   tls:
 6   - hosts:
 7     - jenkins.gkkxd.com
 8     secretName: jenkins-secret
 9   rules:
10   - host: jenkins.gkkxd.com
11     http:
12       paths:
13       - backend:
14           serviceName: jenkins
15           servicePort: 8080
16         path: /

3. 安装 jenkins Kubernetes 插件

4. 创建 jenkins Kubernetes 云

jenkins-系统管理-系统设置-云-Kubernetes:

Name: k8s_cluster
Kubernetes URL: https://kubernetes.default
Kubernetes Namespace: default
Jenkins URL: http://jenkins.default:8080

images - Kubernetes Pod Template:
Name: jnlp-slave
Labels: jnlp-slave
Docker image: registry.gkkxd.com/jenkinsci/jnlp-slave:2.52
Jenkins slave root directory: /home/jenkins

技术分享