2. 程式人生 > 其它 >jenkins+git+docker構建持續化整合環境

jenkins+git+docker構建持續化整合環境

阿新 • • 發佈：2021-11-03

jenkins+git+docker構建持續化整合環境

CI/CD介紹

釋出流程設計

伺服器IP地址主機名
Git/Harbor 192.168.200.70 git-harbor
Docker 192.168.200.111 docker
Jenkins 192.168.200.112 jenkins
工具版本
CentOS 7.5_x64
Maven 3.5
Tomcat 8
JDK 1.8
Jenkins 2.6
Docker CE 18.03.1

cat /etc/redhat-release

uname -r

Jenkins+Docker+Git所有包

連結：https://pan.baidu.com/s/10GWHTqAx9E9d1hhJNuI1gw
提取碼：py3b

部署Harbor映象倉庫

伺服器IP地址
Git/Harbor 192.168.200.70

建立ca證書

mkdir -p /data/ssl

cd /data/ssl

which openssl

openssl req -newkey rsa:4096 -nodes -sha256 -keyout ca.key -x509 -days 365 -out ca.crt

  1. Generating a 4096 bit RSA private key
  2. .................................................++
  3. ......................................................................................................................++
  4. writing new private key to 'ca.key'
  5. -----
  6. You are about to be asked to enter information that will be incorporated
  7. into your certificate request.
  8. What you are about to enter is what is called a Distinguished Name or a DN.
  9. There are quite a few fields but you can leave some blank
  10. For some fields there will be a default value,
  11. If you enter '.', the field will be left blank.
  12. -----
  13. Country Name (2 letter code) [XX]:CN
  14. State or Province Name (full name) []:Beijing
  15. Locality Name (eg, city) [Default City]:Beijing
  16. Organization Name (eg, company) [Default Company Ltd]:yunjisuan
  17. Organizational Unit Name (eg, section) []:yunjisuan
  18. Common Name (eg, your name or your servers hostname) []:www.yunjisuan.com
  19. Email Address []：

生成證書請求

openssl req -newkey rsa:4096 -nodes -sha256 -keyout www.yunjisuan.com.key -out www.yunjisuan.com.csr

  1. Generating a 4096 bit RSA private key
  2. ..........................................................++
  3. .......................................................................................................................++
  4. writing new private key to 'www.yunjisuan.com.key'
  5. -----
  6. You are about to be asked to enter information that will be incorporated
  7. into your certificate request.
  8. What you are about to enter is what is called a Distinguished Name or a DN.
  9. There are quite a few fields but you can leave some blank
  10. For some fields there will be a default value,
  11. If you enter '.', the field will be left blank.
  12. -----
  13. Country Name (2 letter code) [XX]:CN
  14. State or Province Name (full name) []:Beijing
  15. Locality Name (eg, city) [Default City]:Beijing
  16. Organization Name (eg, company) [Default Company Ltd]:yunjisuan
  17. Organizational Unit Name (eg, section) []:yunjisuan
  18. Common Name (eg, your name or your servers hostname) []:www.yunjisuan.com
  19. Email Address []:
  21. Please enter the following 'extra' attributes
  22. to be sent with your certificate request
  23. A challenge password []:
  24. An optional company name []:

生成登錄檔主機的證書

openssl x509 -req -days 365 -in www.yunjisuan.com.csr -CA ca.crt -CAkey ca.key -CAcreateserial -out www.yunjisuan.com.crt

  1. Signature ok
  2. subject=/C=CN/ST=Beijing/L=Beijing/O=yunjisuan/OU=yunjisuan/CN=www.yunjisuan.com
  3. Getting CA Private Key

ll

信任自簽發的證書

cp www.yunjisuan.com.crt /etc/pki/ca-trust/source/anchors/

update-ca-trust enable

update-ca-trust extract

安裝docker-ce社群版

setenforce 0

yum -y install yum-utils device-mapper-persistent-data lvm2

curlhttps://download.docker.com/linux/centos/docker-ce.repo-o /etc/yum.repos.d/docker-ce.repo

yum -y install docker-ce

systemctl start docker

systemctl enable docker

docker version

安裝harbor倉庫

mkdir -p /etc/ssl/harbor

cp /data/ssl/www.yunjisuan.com.key /etc/ssl/harbor/

cp /data/ssl/www.yunjisuan.com.crt /etc/ssl/harbor/

wgethttp://harbor.orientsoft.cn/harbor-v1.5.0/harbor-offline-installer-v1.5.0.tgz
上文有下載包，這裡就沒有wget下載。

mkdir -p /data/install

cd /data/install

ls

tar xf harbor-offline-installer-v1.5.0.tgz

cd harbor

cp harbor.cfg{,.bak}

vim harbor.cfg

cat -n harbor.cfg | sed -n '7p;11p;23p;24p;68p'

  1. 7 hostname = www.yunjisuan.com
  2. 11 ui_url_protocol = https
  3. 23 ssl_cert = /etc/ssl/harbor/www.yunjisuan.com.crt
  4. 24 ssl_cert_key = /etc/ssl/harbor/www.yunjisuan.com.key
  5. 68 harbor_admin_password = Harbor12345

安裝命令docker-compose（需要1.21版本）

  1. curl -L https://github.com/docker/compose/releases/download/1.21.2/docker-compose-$(uname
  2. -s)-$(uname -m) -o /usr/local/bin/docker-compose
  3. 上文有下載包，這裡就沒有下載

cd /usr/local/bin/

ls

chmod +x /usr/local/bin/docker-compose

which docker-compose

docker-compose -version

啟動harbor私有映象倉庫

cd /data/install/harbor

./install.sh --with-clair

為其他伺服器下發證書，並對映域名

為其他伺服器下發證書

scp /data/ssl/www.yunjisuan.com.crt 192.168.200.111:/etc/pki/ca-trust/source/anchors/

scp /data/ssl/www.yunjisuan.com.crt 192.168.200.112:/etc/pki/ca-trust/source/anchors/

在Docker客戶端上（192.168.200.111）

update-ca-trust enable

update-ca-trust extract

vim /etc/hosts

tail -1 /etc/hosts

  1. 192.168.200.70 www.yunjisuan.com

在jenkins伺服器上（192.168.200.203）

update-ca-trust enable

update-ca-trust extract

vim /etc/hosts

tail -1 /etc/hosts

  1. 192.168.200.70 www.yunjisuan.com

部署Git伺服器

伺服器IP地址主機名
Git/Harbor 192.168.200.70 git-harbor
Jenkins伺服器 192.168.200.112 jenkins

以下操作在Harbor/Git上（192.168.200.70）

yum -y install git

which git

建立git使用者密碼

useradd git

passwd git

su - git

建立git專案目錄

mkdir solo.git

cd solo.git/

初始化git目錄

git --bare init

ls

以下的操作在Jenkins上（192.168.200.112）

在192.168.200.112上也安裝git模擬專案程式碼提交

yum -y install git

which git

建立用於提交的git目錄

mkdir -p /code

cd /code

git clone [email protected]:/home/git/solo.git

ls

將solo專案的原始碼拷貝到git的上傳目錄下(solo原始碼在上文有下載連結)

mv ~/solo/* solo/

ls solo/

新增需要提交的檔案目標

cd solo

git add .

進行程式碼提交

git commit -m "all"

  1. *** Please tell me who you are. #出現這個提示是讓你補充提交資訊
  3. Run
  5. git config --global user.email "[email protected]" #你的郵箱
  6. git config --global user.name "Your Name" #你的名字
  8. to set your account's default identity.
  9. Omit --global to set the identity only in this repository.
  11. fatal: unable to auto-detect email address (got 'root@JenkinsServer.(none)')

git config --global user.email "[email protected]"

git config --global user.name "Mr.sun"

git commit -m "all" #補充資訊後，即可提交成功

提交完程式碼之後，需要推送到git服務端

git push origin master --->origin master版本資訊

為了最後的solo專案測試，我們需要修改一下solo專案原始碼的某個配置檔案

cd /code/solo/src/main/resources

ls

cat -n latke.properties | sed -n '29p;31p'

  1. 29 serverHost=localhost
  2. 31 serverPort=8080

將檔案的上邊兩行程式碼修改成如下所示

vim latke.properties

cat -n latke.properties | sed -n '29p;31p'

  1. 29 serverHost=192.168.200.111 #修改成docker的IP地址
  2. 31 serverPort=8888

再次進行git版本提交

cd /code/solo/

git add .

git commit -m "latke.properties"

git push origin master

構建業務基礎映象(tomcat:v1)

在後邊構建

伺服器IP地址主機名
Docker 192.168.200.111 docker

安裝docker

yum -y install yum-utils device-mapper-persistent-data lvm2

curlhttps://download.docker.com/linux/centos/docker-ce.repo-o /etc/yum.repos.d/docker-ce.repo

yum -y install docker-ce

docker --version

新增docker國內映象源

mkdir -p /etc/docker

vim /etc/docker/daemon.json

cat /etc/docker/daemon.json

  1. {
  2. "registry-mirrors":[ "https://registry.docker-cn.com" ]
  3. }

systemctl daemon-reload

systemctl restart docker

部署jdk環境（不需要新增環境變數）

ls

tar xf jdk-8u45-linux-x64.tar.gz -C /usr/local/

cd /usr/local

ls

ln -s jdk1.8.0_45 jdk

Jenkins安裝

伺服器IP地址主機名
Jenkins伺服器 192.168.200.112 jenkins

安裝docker-ce環境

yum -y install yum-utils device-mapper-persistent-data lvm2

curlhttps://download.docker.com/linux/centos/docker-ce.repo-o /etc/yum.repos.d/docker-ce.repo

yum -y install docker-ce

mkdir -p /etc/docker

vim /etc/docker/daemon.json

cat /etc/docker/daemon.json

  1. {
  2. "registry-mirrors":[ "https://registry.docker-cn.com" ]
  3. }

systemctl daemon-reload

systemctl restart docker

安裝JDK環境（因為是要用在容器中，因此宿主機不配PATH）

ls

tar xf jdk-8u45-linux-x64.tar.gz -C /usr/local/

cd /usr/local

ls

ln -s jdk1.8.0_45 jdk

安裝maven-3.5.0

ls

tar xf apache-maven-3.5.0-bin.tar.gz -C /usr/local/

cd /usr/local

ls

ln -s apache-maven-3.5.0 maven

建立jenkins映象的Dockerfile

沒有wget命令需要提前yum安裝

mkdir -p dockerfile/jenkins

cd dockerfile/jenkins

vim Dockerfile

cat Dockerfile

  1. FROM jenkins
  3. USER root
  5. RUN echo "" > /etc/apt/sources.list.d/jessie-backports.list && \
  6. wget http://mirrors.163.com/.help/sources.list.jessie -O /etc/apt/sources.list
  7. RUN apt-get update && apt-get install -y git libltdl-dev

建立jenkins映象

docker build -t jenkins:v1 .

docker images

由於我們是在映象中去構建Jenkins的，所以

  • jenkins容器的資料目錄我們需要從宿主機上掛載（避免容器資料丟失）

  • jenkins的執行需要jdk環境，所以我們直接掛載宿主機上的jdk

  • jenkins構建java程式碼需要maven支援，所以我們直接掛載宿主機上的maven

  • Jenkins需要docker支援

  • Jenkins需要免互動拉取git程式碼，因此掛載本地的ssh金鑰

建立jenkins資料目錄

mkdir -p /var/jenkins_home

進行ssh免金鑰互動驗證

ssh-keygen --->一律回車即可

ssh-copy-id [email protected]

進行免互動測試

ssh [email protected]

啟動jenkins容器

docker run -dit --name jenkins -p 8080:8080 -v /var/jenkins_home/:/var/jenkins_home/ -v /usr/local/apache-maven-3.5.0:/usr/local/maven -v /usr/local/jdk1.8.0_45:/usr/local/jdk -v /var/run/docker.sock:/var/run/docker.sock -v /usr/bin/docker:/usr/bin/docker -v ~/.ssh:/root/.ssh jenkins:v1

利用瀏覽器訪問Jenkins容器

http://192.168.200.112:8080

docker exec jenkins cat /var/jenkins_home/secrets/initialAdminPassword

  1. c7e4ae00fd5941d6b20f1e45ab6835b6 #這就是密碼，輸入到瀏覽器裡

選擇所有外掛後，直接點install即可

我們現在構建一個可以執行solo程式碼的tomcat映象

mkdir -p /root/dockerfile/solo

cd /root/dockerfile/solo

vim Dockerfile

cat Dockerfile

  1. FROM centos:7
  2. MAINTAINER www.yunjisuan.com
  4. RUN yum install unzip iproute -y
  6. ENV JAVA_HOME /usr/local/jdk
  8. ADD apache-tomcat-8.0.46.tar.gz /usr/local
  9. RUN mv /usr/local/apache-tomcat-8.0.46 /usr/local/tomcat
  11. WORKDIR /usr/local/tomcat
  12. EXPOSE 8080
  13. ENTRYPOINT ["./bin/catalina.sh", "run"]

ls

構建映象

docker build -t tomcat:v1 .

docker images

登陸harbor私有倉庫

docker login -uadmin -pHarbor12345 www.yunjisuan.com

推送映象到harbor倉庫（如果推送失敗請檢視證書驗證或者docker是否登陸）

docker images

docker tag tomcat:v1 www.yunjisuan.com/library/tomcat:v1

docker push www.yunjisuan.com/library/tomcat:v1

Jenkins基本配置

使用者名稱：admin 密碼:linyaonie

設定全域性配置

設定ssh連線憑據

jenkins連線Docker測試伺服器免互動驗證

ssh-copy-id [email protected]

ssh [email protected]

在Jenkins的Web介面上新增憑據

cat ~/.ssh/id_rsa #就是把這些內容複製

Jenkins建立專案

我們先開始一個新的任務

圖片說明

圖片說明

到這裡我們先來測試一下maven構建java程式碼的效果

點選solo_blog專案的立刻構建，檢視構建資訊

在Jenkins伺服器上檢視構建後的結果

cd /var/jenkins_home/workspace/solo_blog/target

ls

ll solo.war --->這就是構建出來的war包

  1. 2.[root@JenkinsServer target]# pwd
  2. 3./var/jenkins_home/workspace/solo_blog/target
  3. 4.[root@JenkinsServer target]# ls
  4. 5.classes generated-test-sources maven-status solo_h2_test surefire-reports
  5. 6.generated-sources maven-archiver solo solo.war test-classes
  6. 7.[root@JenkinsServer target]# ll solo.war #這就是構建出來的war包
  7. 8.-rw-r--r-- 1 root root 43037193 7月 25 22:12 solo.war

通過指令碼將war包封裝進一個tomcat的映象中，然後推送到harbor

所以利用maven構建java的原始碼實際上就是生成可以在tomcat等容器中執行的war包
現在我們重新修改一下專案的配置，增加POST Steps（構建之後的操作）
其實，構建之後，我們只需要通過指令碼將war包封裝進一個tomcat的映象中，然後推送到harbor裡即可。

這就是需要新增進去的指令碼內容

cd $WORKSPACE--->這是jenkins的可用變數，具體可以在上圖下邊檢視

  1. cd $WORKSPACE
  2. cat > Dockerfile << FOF
  3. FROM www.yunjisuan.com/library/tomcat:v1
  4. MAINTAINER www.yunjisuan.com
  5. COPY target/solo.war /tmp/ROOT.war
  6. RUN rm -rf /usr/local/tomcat/webapps/* && \
  7. unzip /tmp/ROOT.war -d /usr/local/tomcat/webapps/ROOT && \
  8. rm -f /tmp/ROOT.war
  9. WORKDIR /usr/local/tomcat
  10. EXPOSE 8080
  11. ENTRYPOINT ["./bin/catalina.sh","run"]
  12. FOF
  14. docker build -t www.yunjisuan.com/library/solo:v1 .
  15. docker login -uadmin -pHarbor12345 www.yunjisuan.com
  16. docker push www.yunjisuan.com/library/solo:v1

然後我們再次進行構建檢視

至此我們就完成了以下幾步

git拉取java的solo專案原始碼
maven構建java的solo專案war包
將war包封裝成tomcat的容器啟動映象
將映象上傳harbor私有映象倉庫

我們還需要能夠直接部署到遠端測試主機

（192.168.200.111）上，因此我們繼續設定

在遠端主機（Docker測試伺服器）執行的指令碼如下

  1. docker rm -f solo #清理舊的solo容器程序
  2. docker rmi -f www.yunjisuan.com/library/solo:v1 #清理舊的solo:v1映象（不清理就不拉取映象了）
  3. docker login -uadmin -pHarbor12345 www.yunjisuan.com
  4. docker run -d --name solo -p 8888:8080 -v /usr/local/jdk1.8.0_45/:/usr/local/jdk www.yunjisuan.com/library/solo:v1

再次進行構建，並在docker主機上檢視構建結果

docker images --->docker測試伺服器上有映象了

  1. 2.REPOSITORY TAG IMAGE ID CREATED SIZE
  2. 3.www.yunjisuan.com/library/solo v1 e1b0d010c11b 11 minutes ago 408MB
  3. 4.redis latest f06a5773f01e 8 days ago 83.4MB
  4. 5.centos latest 49f7960eb7e4 7 weeks ago 200MB

docker ps -a --->啟動容器程序了

  1. 7.CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
  2. 8.c4dba5567fd5 www.yunjisuan.com/library/solo:v1 "./bin/catalina.sh r…" 11 minutes ago Up 11 minutes 0.0.0.0:8888->8080/tcp solo

我們通過瀏覽器訪問

http://192.168.200.112:8888

好文要頂 關注我 收藏該文

相關推薦

jenkins+git+docker構建持續化整合環境

jenkins+git+docker構建持續化整合環境 CI/CD介紹 釋出流程設計 伺服器IP地址主機名

Docker Devops---Git和MySql構建持續整合的版本控制和資料庫環境

Docker DevOps（一） 安裝Git和MySql構建持續整合的版本控制和資料庫環境 1.安裝docker

Docker+Jenkins持續整合環境（2）使用docker+jenkins構建nodejs前端專案

前文使用Docker搭建Jenkins+Docker持續整合環境我們已經搭建了基於docker+jenkins的持續整合環境，並構建了基於maven的專案。這一節，我們繼續擴充套件功能，增加對Nodejs的支援,實現nodejs專案構建、並打包成docker

Docker--在 Jenkins 容器上的搭建持續整合環境和完成自動化測試

本文轉自：https://www.cnblogs.com/poloyy/p/13955641.html Jenkins 初始化流程 訪問 Jenkins 檢視本機 IP

構建GitLab 與 Jenkins 持續整合環境

  什麼是持續整合？   持續整合 Continuous Integration   簡單來說就是在開發過程當中，可以頻繁地將程式碼部署到主幹上。

Docker+Jenkins持續整合環境（1）使用Docker搭建Jenkins+Docker持續整合環境

本文介紹如何通過Jenkins的docker映象從零開始構建一個基於docker映象的持續整合環境，包含自動化構建、釋出到倉庫並部署上線。

Linux下搭建git伺服器 Jenkins持續整合環境部署

1、安裝Git 見 Jenkins持續整合環境部署 第四節 2、建立Git使用者和使用者組 1 groupadd git

三：持續整合環境-jenkins 憑證管理

憑證可以用來儲存需要密文保護的資料庫密碼、gitlab密碼資訊、docker私有倉庫密碼等，以便jenkins可以和這些第三方的應用進行互動

四：持續整合環境-jenkins Maven安裝與配置

Maven安裝與配置（編譯和打包專案） 官方下載二進位制包：https://maven.apache.org/download.cgi

九：持續整合環境-jenkins Pipeline 的jenkinsfile

版本控制 防止jenkins崩潰指令碼丟失 將jenkinsfile檔案存放在專案程式碼目錄下，一般與pom.xml在一級

十五：持續整合環境-jenkins 程式碼審查 SonarQube jenkins整合實現程式碼審查

jenkins ---呼叫---》 Sonar Scanner ---提交審查結果---》 SonarQube ---儲存審查結果---》MYSQL資料庫

基於Jenkins搭建.NET Core持續整合環境過程圖解

我們用NuGet還原.NET Core專案會報以下錯誤： error NETSDK1064: 未找到版本為 1.8.2 的包 BouncyCastle.NetCore。它可能已在 NuGet 還原後刪除。否則，NuGet 還原可能只是部分完成，這種情況可能是最大路徑長度限制

基於Jenkins搭建.NET FrameWork持續整合環境

這裡我們主要搭建 .Net 環境。本文是在 Windows 環境下安裝的 Jenkins 進行操作 一、安裝所需環境

Jenkins+maven+svn+tomcat持續整合環境

前言 團隊最近要把專案釋出的工作拿過來，所以需要一個持續整合釋出系統 直接上步驟。

CI/CD（持續整合構建/持續交付）：如何測試/整合/交付專案程式碼？（Jenkins，TravisCI）

Table of Contents CI(Continuous integration，持續整合) CD(Continuous Delivery， 持續交付) Different types of testing explained

持續整合工具 jenkins 之 docker 部署 jenkins

記一次使用docker部署jenkins的過程 準備事項 1、準備一臺阿里雲ECS，CentOS 8.2的映象系統

jenkins實現介面自動化持續整合（python+pytest+ Allure+git）

本文首發於：行者AI 在用python做自動化測試時，我們寫好程式碼，然後需要執行才能得到測試報告，這時我們可以通過 Jenkins 來進一步完成自動化工作。藉助Jenkins，我們可以結合 Git/SVN 自動拉取程式碼，通過設定

ant+jmeter+jenkins+git持續整合以及郵件報告展示

前序準備工作： ant--下載地址：http://ant.apache.org/bindownload.cgi jmeter--下載地址：http://jmeter.apache.org/download_jmeter.cgi

docker搭建持續整合平臺Jenkins

一、安裝環境 CentOS Linux release 8.2.2004 (Core) Docker20.10.9 二、拉取映象 要使用最新的LTS（長期支援的穩定版本）

jenkins+git構建jar包並把jar包執行在docker容器自動化部署

這篇部落格的目的實現：使用jenkins從git倉庫拉取java專案程式碼，並打成jar，然後在jenkins把jar包執行在docker容器裡