1. 程式人生 > 其它 >基於KubernetesK8S構建Jenkins持續整合平臺(然後天亮了。 然後我們就繼續往前走。 無論你想留在哪一天,天總會亮的。)

基於KubernetesK8S構建Jenkins持續整合平臺(然後天亮了。 然後我們就繼續往前走。 無論你想留在哪一天,天總會亮的。)

基於Kubernetes/K8S構建Jenkins持續整合平臺() Jenkins-Master-Slave架構圖回顧:

 

 

安裝和配置NFS //所有k8s節點harbor倉庫配置 {   "insecure-registries": ["192.168.195.128:5000"],   "registry-mirrors": ["https://05vz3np5.mirror.aliyuncs.com"] }   systemctl  restart  docker   NFS簡介 NFSNetwork File System),它最大的功能就是可以通過網路,讓不同的機器、不同的作業系統可以共享彼此的檔案。我們可以利用NFS共享Jenkins執行的配置檔案、Maven的倉庫依賴檔案等
  NFS安裝   我們把NFS伺服器安裝在192.168.66.101機器上 1) 安裝NFS服務(在所有K8S的節點都需要安裝) yum install -y nfs-utils 2) 建立共享目錄(k8smaster)  
mkdir -p /opt/nfs/jenkins
vi /etc/exports 編寫NFS的共享配置  
內容如下:    
/opt/nfs/jenkins *(rw,no_root_squash) *代表對所有IP都開放此目錄,rw是讀寫
  3) 啟動服務 systemctl enable nfs 開機啟動
systemctl start nfs 啟動 4) 檢視NFS共享目錄在工作節點 showmount -e 192.168.195.200

 

  Kubernetes安裝Jenkins-Master 建立NFS client provisioner nfs-client-provisioner 是一個Kubernetes的簡易NFS的外部provisioner,本身不提供NFS,需要現有的NFS伺服器提供儲存。   1) 上傳nfs-client-provisioner構建檔案

 

 

其中注意修改deployment.yaml,使用之前配置NFS伺服器和目錄  

 

2) 構建nfs-client-provisionerpod資源
cd nfs-client kubectl create -f . 3) 檢視pod是否建立成功

 

Jenkins-Master           、 1)上傳Jenkins-Master構建檔案

 

 

其中有兩點注意: 第一、在StatefulSet.yaml檔案,聲明瞭利用nfs-client-provisioner進行Jenkins-Master檔案儲存

 

 

  第二、Service釋出方法採用NodePort,會隨機產生節點訪問埠  

 

2) 建立kube-opsnamespace 因為我們把Jenkins-Masterpod放到kube-ops kubectl create namespace kube-ops   3) 構建Jenkins-Masterpod資源  cd jenkins-master kubectl create -f . 4) 檢視pod是否建立成功 kubectl get pods -n kube-ops 5) 檢視資訊,並訪問 檢視Pod執行在那個Node kubectl describe pods -n kube-ops

 

檢視分配的埠 kubectl get service -n kube-ops

 

 

  最終訪問地址為:http://192.168.195.202:31138/ 192.168.195.202k8s-node2IP

 

 

  安裝過程跟之前是一樣的! 找到金鑰複製貼上

 

 

 

 

 

KubernetesJenkins部署完成!!!   設定外掛下載地址 cd /opt/nfs/jenkins/kube-ops-jenkins-home-jenkins-0-pvc-7ad49840-b65d-4ec9-a1f5-3681843526b2/updates sed -i 's/http:\/\/updates.jenkins- ci.org\/download/https:\/\/mirrors.tuna.tsinghua.edu.cn\/jenkins/g' default.json && sed -i 's/http:\/\/www.google.com/https:\/\/www.baidu.com/g' default.json Manage Plugins點選Advanced,把Update Site改為國內外掛下載地址https://mirrors.tuna.tsinghua.edu.cn/jenkins/updates/update-center.json

 

 

  6)  先安裝基本的外掛 Localization:Chinese Git Pipeline Extended Choice Parameter 重啟Jenkins   JenkinsKubernetes整合 安裝Kubernetes外掛 系統管理->外掛管理->可選外掛

 

 

  實現JenkinsKubernetes整合 系統管理->系統配置->->新建雲->Kubernetes

 

kubernetes 址 採 用 了 kube 服 務 器 發 現 :https://kubernetes.default.svc.cluster.local  namespacekube-ops,然後點選Test Connection,如果出現 Connection test successful 的提示資訊證明 Jenkins 已經可以和 Kubernetes 系統正常通訊 Jenkins URL 地址:http://jenkins.kube-ops.svc.cluster.local:8080   構建Jenkins-Slave自定義映象 Jenkins-Master在構建Job的時候,Kubernetes會建立Jenkins-SlavePod來完成Job的構建。我們選擇  執行Jenkins-Slave的映象為官方推薦映象:jenkins/jnlp-slave:latest,但是這個映象裡面並沒有Maven    環境,為了方便使用,我們需要自定義一個新的映象: 準備材料:

 

 

Dockerfile檔案內容如下:     FROM jenkins/jnlp-slave:latest  MAINTAINER yy # 切換到 root 賬戶進行操作 USER root   # 安裝 maven COPY apache-maven-3.6.2-bin.tar.gz .   RUN tar -zxf apache-maven-3.6.2-bin.tar.gz && \     mv apache-maven-3.6.2 /usr/local && \     rm -f apache-maven-3.6.2-bin.tar.gz && \     ln -s /usr/local/apache-maven-3.6.2/bin/mvn /usr/bin/mvn && \     ln -s /usr/local/apache-maven-3.6.2 /usr/local/apache-maven && \     mkdir -p /usr/local/apache-maven/repo   COPY settings.xml /usr/local/apache-maven/conf/settings.xml   USER jenkins   //構建映象 docker build -t jenkins-slave-maven:latest . 構建出一個新映象:jenkins-slave-maven:latest       docker login -u admin -p Harbor12345 192.168.153.40:85 docker tag jenkins-slave-maven:latest 192.168.153.40:85/library/jenkins-slave-maven:latest docker push 192.168.153.40:85/library/jenkins-slave-maven:latest

 

 

  測試Jenkins-Slave是否可以建立 1) 建立一個Jenkins流水線專案

 

 

 

 

f06c4b06-ac26-4683-ad00-2d3599c827ee

 

2) 編寫Pipeline,從GItlab拉取程式碼(使用http方式 def git_address = "http://192.168.195.180:82/kgc_group/tensquare_back.git"  def git_auth = "f06c4b06-ac26-4683-ad00-2d3599c827ee"   //建立一個Pod的模板,labeljenkins-slave podTemplate(label: 'jenkins-slave', cloud: 'kubernetes', containers: [     containerTemplate(         name: 'jnlp',         image: "192.168.153.90:85/library/jenkins-slave-maven:latest"     )   ] ) {     //引用jenkins-slavepod模組來構建Jenkins-Slavepod     node("jenkins-slave"){         stage('拉取程式碼'){             checkout([$class: 'GitSCM', branches: [[name: '*/master']], extensions: [], userRemoteConfigs: [[credentialsId: "${git_auth}", url: "${git_address}"]]])         }     } }   3) 檢視構建日誌(建立的時候可以開啟node管理檢視臨時節點