Jenkins與Docker的自動化CI/CD

高效的CI/CD環境是什么樣的？

1. 及時發現問題：提早得到集成反饋和修復

2. 大幅度減少故障率：業務流程化，減少人工出錯風險

3. 加快迭代速度：可以在幾分鐘內運行幾十次、甚至上百次持續集成

4. 減少時間成本：多項目管理及繁瑣的部署工作沒有了，不必再花費一定時間去準備

5. 研發端到端流水線，一鍵部署，應用彈性伸縮，灰度發布

要想做到一個高效的CI/CD流程，需要有能力整合DevOps工具鏈及多環境適配，并且設計之初以自動化為原則，如一鍵部署、一鍵升級。

發布流程設計

? 在這里插入圖片描述

Jenkins + Docker

下圖是構想的網絡結構圖

大體結構

大體結構

1. 開發人員在gitLab上打了一個tag

2. gitLab把tag事件推送到Jenkins

3. Jenkins 獲取tag源碼，編譯，打包，構建鏡像

4. Jenkins push 鏡像到阿里云倉庫

5. Jenkins 執行遠程腳本
5-1. 遠程服務器 pull 指定鏡像
5-2. 停止老版本容器，啟動新版本容器

6. 通知測試人員部署結果

基于maven構建鏡像，上傳阿里云docker倉庫

maven 構建鏡像配置

pom.xml 文件添加docker插件

  com.spotify
  docker-maven-plugin
  0.4.11
  
    ${docker.image.prefix}/${project.artifactId}
    
      ${project.version}
      latest
    
    src/main/docker
    
      
        /
        ${project.build.directory}
        ${project.build.finalName}.jar
      
    
  

? ${docker.image.prefix} 是鏡像的前綴

? ${project.artifactId} 是鏡像名字

? ${project.version} 版本號，此處也用來當做鏡像的版本號

docker-maven-plugin 使用可以自行百度。

src/main/docker 目錄下新增文件 Dockerfile，內容如下：

FROM frolvlad/alpine-oraclejdk8:slim
VOLUME /tmp
ADD demo-service-ver-0.0.1.jar app.jar
RUN sh -c 'touch /app.jar'
ENV JAVA_OPTS=""
ENTRYPOINT [ "sh", "-c", "java $JAVA_OPTS -Djava.security.egd=file:/dev/./urandom -jar /app.jar" ]

以上的配置可以把一個服務打包成鏡像，只需要執行

`$ sudo mvn package docker:build`

阿里云docker倉庫使用

注冊或者啟用阿里云docker倉庫就不贅述。下面簡單介紹上傳拉取docker鏡像

? 登錄

`$ sudo docker login --username=用戶名 --password=密碼 registry-internal.cn-hangzhou.aliyuncs.com`

? push 之前生成的鏡像

$ sudo docker tag [ImageId] registry.cn-hangzhou.aliyuncs.com/xxx/demo-service:[鏡像版本號]
$ sudo docker push registry.cn-hangzhou.aliyuncs.com/xxx/demo-service:[鏡像版本號]

xxx : 是你鏡像倉庫的namespace

一堆push后，你就可以在阿里云的Docker鏡像倉庫里面看到你對應的鏡像了。下圖是我們公司的部分鏡像列表

? 鏡像列表 鏡像列表

? pull 鏡像 登錄操作同上

`$ sudo docker pull registry.cn-hangzhou.aliyuncs.com/xxx/demo-service:[鏡像版本號]`

jenkins 部署配置

構建Jenkins鏡像

FROM jenkins
USER root
RUN apt-get update && apt-get install -y sudo && rm -rf /var/lib/apt/lists/*
RUN echo "jenkins ALL=NOPASSWD: ALL" >> /etc/sudoers
USER jenkins

一開始使用官方的鏡像直接啟用，一些插件和配置多少都有點問題，比如不能使用sudo，等等。因此基于官方鏡像構建一個更符合我們需要的鏡像。

構建命令：

 $ sudo docker build -t buxiaoxia/jenkins:1.0

啟動Jenkins容器

sudo docker run --memory 1.5G --name buxiaoxia-jenkins 
-p 18181:8080 -p 50000:50000 -u root -d 
--env JAVA_OPTS="-Xms256m -Xmx512m -XX:MaxNewSize=256m" 
-v /var/run/docker.sock:/var/run/docker.sock  
-v /usr/bin/docker:/usr/bin/docker 
-v /home/buxiaoxia/software/jenkins:/var/jenkins_home 
-v /usr/lib64/libltdl.so.7:/usr/lib/x86_64-linux-gnu/libltdl.so.7 
buxiaoxia/jenkins:1.0

簡單解釋下：

-v /var/run/docker.sock:/var/run/docker.sock與 _-v /usr/bin/docker:/usr/bin/docker_是把宿主機docker 映射到容器內。

-v /home/buxiaoxia/software/jenkins:/var/jenkins_home指定Jenkins的宿主機存儲路徑

-v /usr/lib64/libltdl.so.7:/usr/lib/x86_64-linux-gnu/libltdl.so.7在centos7 系統下會出現個別的包丟失，對應的引下宿主機的包就可以。

docker在容器內構建的時候，如果出現權限不夠什么的。可以在宿主機中使用以下兩種方式：

 `$ sudo chmod 777 /var/run/docker.sock`

或者

`$ usermod -a -G docker jenkin`

jenkins 啟動后，訪問對應的Jenkins頁面，初始化只要一步步跟著走就可以了。

Jenkins配置

插件下載

所需要的插件：

? Maven Integration plugin

? docker-build-step

? Docker plugin

? Gitlab Hook Plugin

? GitLab Plugin

因為使用的是gitlab，對應的插件也是必須的。下載完插件后，maven等相關插件配置好（此處省略...）

maven 鏡像地址配置

可以直接在宿主機修改，路徑在:/home/buxiaoxia/software/jenkins/tools/hudson.tasks.Maven_MavenInstallation/maven3-1/conf 下的settings.xml

setting.xml 鏡像改成阿里云的就OK，飛起。。。

新建一個maven job

源碼配置

?

構建

?

構建后執行特定腳本

?

腳本內容如下：

echo '================開始推送鏡像================'
sudo docker login --username=用戶名 --password=密碼 registry-internal.cn-hangzhou.aliyuncs.com
sudo docker push registry-internal.cn-hangzhou.aliyuncs.com/xxx/demo-service
echo '================結束推送鏡像================'
echo '================開始遠程啟動================'
ssh buxiaoxia@192.168.100.2 -tt << remotessh ? ? ? ? ? ?###首先要ssh上去注意這里的<< remotessh，需要做公鑰密鑰

####從這里開始都是在遠程機器上執行命令
cd /home/buxiaoxia/xiaw
./jenkins.sh registry-internal.cn-hangzhou.aliyuncs.com/xxx/demo-service
sudo docker login --username=用戶名 --password=密碼 registry-internal.cn-hangzhou.aliyuncs.com?
sudo docker pull registry-internal.cn-hangzhou.aliyuncs.com/xxx/demo-service

sudo docker run -d -m 300m ?--name=demo-service-`date +%Y-%m-%d` --restart=always registry-internal.cn-hangzhou.aliyuncs.com/xxx/demo-service
echo "finished!"

#####執行完畢

exit ?###退出遠程機器
remotessh ?###結尾哦
echo '================結束遠程啟動================'

jenkins.sh 腳本內容：

#!/bin/sh
sudodocker stop $(sudodocker ps | grep$1|awk'{print $1}'|sed's/%//g')

以上就完成了一個簡單的自動化構建

gitlab配置webhook

Jenkins安裝完對應的gitlab插件，配置中的構建觸發選擇如下

?

復制紅框中的url

再在gitlab的對應項目中webhooks頁面中的url填入前面復制的url

?

保存即可，右下角可以點擊測試哦。

配置完成后，每次該項目有個tag push event ，都會觸發Jenkins的自動構建。接著，Jenkins就執行 拉取源碼 -> 編譯 -> 構建鏡像 -> 推送鏡像 -> 執行遠程啟動腳本完成部署。

總結

一步步的配置，基本就跑通了我們基于Jenkins，docker實現自動化部署的初始版本。開發人員完成功能開發后，需要交互一個測試版本，只需要推送一個tag到git倉庫，就能夠將代碼自動部署到特定的服務器上。可喜可賀~ 可以省去一堆的從一個服務器跑到另一個服務器，然后執行各種命令的瑣碎操作。。。

關于配置

目前我是使用了consul的配置共享，把不同環境的配置放在了consul上，鏡像中沒有保留可變的配置，而是根據啟動的參數就可以自由切換環境配置。
當然，consul的配置共享可以看看我git上關于consul的項目：spring-boot-cloud: Spring Boot Spring Cloud 相關樣例以及學習理解記錄

存在問題

? docker未使用編排，較為獨立，需要知道特定的服務器網絡位置

? docker鏡像的push與pull，都需要明文執行阿里云賬號密碼，可進一步改進

? 未構建版本回退流程

? shell腳本健壯性不夠，異常未處理

優化

可以針對以上問題做相應的優化，完善初始化版本的CD流程。例如，docker 使用swarm，讓swarm管理docker 容器等等。

鏈接：https://blog.csdn.net/Franklin7B/article/details/98210360#comments_31567643