『高級篇』docker之gitlab和jenkins-CICD流程(43)

原創(chuàng)文章社搅,歡迎轉(zhuǎn)載肆资。轉(zhuǎn)載請注明:轉(zhuǎn)載自IT人故事會非春,謝謝领斥!
原文鏈接地址:『高級篇』docker之gitlab和jenkins-CICD流程(43)

上節(jié)已經(jīng)安裝好了gitlab和jenkins,這次就把CICD的流程串起來切身的體驗下CICD梦湘。目的就是在gitlab提交代碼瞎颗。觸發(fā)一系列的流程,最后可以看到新代碼的效果(機(jī)器內(nèi)容優(yōu)先捌议,只做到鏡像的打包推送)哼拔。源碼:https://github.com/limingios/msA-docker/vagrant master分支CICD

了解git代碼提交完成jenkins的構(gòu)建

上次已經(jīng)把代碼上傳上去了,進(jìn)入項目選擇settings里面的Integrations

這里可以配置一個url瓣颅,默認(rèn)的trigger觸發(fā)器push的時候倦逐,

這里的url地址是哪里來的。請查看jenkins宫补,因為本身gitlab里面的微服務(wù)比較多檬姥,選擇其中的一個服務(wù)吧,新建一個任務(wù)名稱:user-edge-service粉怕,允許url遠(yuǎn)程觸發(fā)構(gòu)建任務(wù)健民。

Jenkins中的Job配置里缺少 觸發(fā)遠(yuǎn)程構(gòu)建(例如,使用腳本) 選項的

如圖所示的功能沒有出現(xiàn)在Job配置頁面贫贝,這是由于權(quán)限問題導(dǎo)致的:

關(guān)閉防止跨站點請求偽造

gitlab的Integrations的URL地址修改:
http://192.168.66.102:8888/job/user-edge-service/build?token=123456

gitlab設(shè)置Webhooks報錯Urlis blocked: Requests to localhost are not allowed秉犹。admin 登錄設(shè)置



gitlab的Integrations,添加完畢稚晚。

jenkins的添加完畢

image.png
  • 測試一把

返回201崇堵,說明構(gòu)建返回成功。

構(gòu)建說明

咱們的所有構(gòu)建都是基于pipline的客燕,腳本是用groovy來做的鸳劳,如果老鐵有不會的可以查看,可以流水線語法也搓。

  • 開始pipline的編寫

Jenkins Pipeline是一套插件赏廓,支持將連續(xù)輸送Pipeline實施和整合到Jenkins。Pipeline 提供了一組可擴(kuò)展的工具还绘,用于通過Pipeline DSL為代碼創(chuàng)建簡單到復(fù)雜的傳送Pipeline 楚昭。

寫個測試的試試

#!groovy
pipeline {
//之前說過jenkins是支持集群的,但是咱們這里不需要集群的方式拍顷,因為有了k8s抚太。any在任何可用的agent 上執(zhí)行
    agent any
    //環(huán)境變量,
    environment {
        REPOSITORY="ssh://git@192.168.66.101:2222/liming/microservice.git"
    
    }
    //流水線是如何提前昔案,都是通過很多個stages下面的stage
    stages {
        stage('獲取代碼'){
            steps{
                echo " start fetch code from git ssh://git@192.168.66.101:2222/liming/microservice.git"
                deleteDir()
                git "${REPOSITORY}"
            }
        }
    }
}

點擊立即構(gòu)建尿贫,然后查看效果

jenkins所在容器未配置,秘鑰到gitlab上踏揣,來一起配置下

進(jìn)入102的主機(jī)上

docker ps
docker exec -it d918e00a583f /bin/bash
ssh-keygen -t rsa -C "394498036@qq.com"
cat /root/.ssh/id_rsa.pub

在容器內(nèi)試試看能git clone 不

在試試庆亡,立刻構(gòu)建

查看目錄

需要配置maven倉庫地址,當(dāng)前這個鏡像nds國內(nèi)不識別捞稿,在容器內(nèi)需要操作

echo "nameserver 8.8.8.8" | tee /etc/resolv.conf > /dev/null
apt-get update
apt-get install vim
cd /opt/maven/conf
vi settings.xml
mkdir /usr/lib/jvm/java-8-openjdk-amd64/lib

通過更換maven鏡像可以解決此問題又谋,在maven安裝目錄下/opt/maven/conf的conf/settings.xml文件內(nèi)<mirrors>增加一段更改鏡像地址為阿里云的maven拼缝,在mvn compile可解決此問題

<mirror>
<id>nexus-aliyun</id>
<mirrorOf>*</mirrorOf>
<name>Nexus aliyun</name>
<url>http://maven.aliyun.com/nexus/content/groups/public</url>
</mirror>

如果出現(xiàn)這個錯誤,就是找不到tool.jar直接復(fù)制一個tool.jar彰亥,源碼包里面我復(fù)制的有咧七。

[ERROR] Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:2.3.2:compile (default-compile) on project message-thrift-service-api: Compilation failure
[ERROR] Unable to locate the Javac Compiler in:
[ERROR] /usr/lib/jvm/java-8-openjdk-amd64/jre/../lib/tools.jar
[ERROR] Please ensure you are using JDK 1.4 or above and
[ERROR] not a JRE (the com.sun.tools.javac.Main class is required).
[ERROR] In most cases you can change the location of your Java
[ERROR] installation by setting the JAVA_HOME environment variable.

復(fù)制命令

 yum install lrzsz
#rz  選擇tool.jar
docker cp  tool.jar 容器ID:/usr/lib/jvm/java-8-openjdk-amd64/jre/../lib/tools.jar
···

![](https://upload-images.jianshu.io/upload_images/11223715-27d864caa1b8bffa.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)


>配置環(huán)境變量
``` bash
docker exec -it 容器ID /bin/bash
vi ~/.bashrc
#配置下面的環(huán)境變量
set JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
export PATH=${JAVA_HOME}/bin:$PATH 
  • 在此嘗試構(gòu)建
#!groovy
pipeline {
//之前說過jenkins是支持集群的,但是咱們這里不需要集群的方式任斋,因為有了k8s继阻。any在任何可用的agent 上執(zhí)行
    agent any
    //環(huán)境變量,
    environment {
        REPOSITORY="ssh://git@192.168.66.101:2222/liming/microservice.git"
        MODULE="user-edge-service"
    
    }
    //流水線是如何提前废酷,都是通過很多個stages下面的stage
    stages {
        stage('獲取代碼'){
            steps{
                echo " start fetch code from git ssh://192.168.66.101:2222/liming/microservice.git"
                deleteDir()
                git "${REPOSITORY}"
            }
        }
        stage('編譯+單元測試') {
            steps{
                echo " start compile"
                sh "mvn -U -pl ${MODULE} -am clean package"
            }
        }
    }
}

jenkins完成推送到官網(wǎng)鏡像

  1. 創(chuàng)建build-imge文件
  2. docker login登錄到docker倉庫中(之前已經(jīng)說過了瘟檩,我的機(jī)器內(nèi)存比較小,無法啟動私有的docker倉庫我通過的官網(wǎng)的澈蟆,不管哪個都在jenkins的機(jī)器上登錄下墨辛,push的時候就不報錯了)
cd ~
vi build-image.sh
chmod 775 build-image.sh
docker login
#!groovy
pipeline {
//之前說過jenkins是支持集群的,但是咱們這里不需要集群的方式趴俘,因為有了k8s背蟆。any在任何可用的agent 上執(zhí)行
    agent any
    //環(huán)境變量,
    environment {
        REPOSITORY="ssh://git@192.168.66.101:2222/liming/microservice.git"
        MODULE="user-edge-service"
        SCRIPT_PATH="/root/"
    
    }
    //流水線是如何提前哮幢,都是通過很多個stages下面的stage
    stages {
        stage('獲取代碼'){
            steps{
                echo " start fetch code from git ssh://192.168.66.101:2222/liming/microservice.git"
                deleteDir()
                git "${REPOSITORY}"
            }
        }
        stage('代碼靜態(tài)檢查') {
            steps{
                echo " start code check"
            }
        }
        stage('編譯+單元測試') {
            steps{
                echo " start compile"
                sh "mvn -U -pl ${MODULE} -am clean package"
            }
        }
        stage('構(gòu)建鏡像') {
            steps{
                echo " start build image"
                sh "#{SCRIPT_PATH}/build-image.sh ${MODULE}"
            }
        }
        
        stage('發(fā)布系統(tǒng)') {
            steps{
                echo " start deploy"
                sh "#{SCRIPT_PATH}/deploy.sh ${MODULE} ${MODULE}"
            }
        }
        
    }
}

build-image.sh

#!/bin/bash
MODULE=$1
TIME=`date "+%Y%m%d%H%M"`
GIT_REVISION=`git log -1 --pretty=format:"%h"`
IMAGE_NAME=zhugeaming/${MODULE}:${TIME}_${GIT_REVISION}
cd ${MODULE}
docker build -t ${GIT_REVISION} .
docker push ${GIT_REVISION}

deply.sh

#!/bin/bash
IMAGE=`cat IMAGE_NAME`
DEPLOYMENT=$1
MODULE=$2
echo "update image to ${IMAGE}"
kubectl set image deployment/${DEPLOYMENT} ${MODULE} =${MODULE}

PS:最后總結(jié)下带膀,建議jenkins不要使用容器安裝,我用容器安裝入了至少十幾個坑橙垢,對了解命令還是有好處的垛叨。我總結(jié)幾點

  1. 不要容器化jenkins,直接在機(jī)器上安裝就可以了柜某。容器本身都是單個個體嗽元,你想想里面還要裝jdk,mvn喂击,docker剂癌。如果jenkins容器化,等于容器里面還要裝docker是不是很蛋疼翰绊。
  2. 使用pipline寫腳本其實很簡單本身就是流水線佩谷,比較負(fù)責(zé)命令建議使用shell腳本的方式,這是也方便維護(hù)监嗜。
  3. gitlab里面谐檀,outbound requests 允許
  4. jenkins里面有幾個重要的點跨域允許訪問,允許用戶注冊
  5. 寫的流程有點復(fù)雜裁奇,我是邊練邊寫的桐猬,但是記錄了我遇到的各種問題,希望能對有問題的老鐵有幫助刽肠。
  6. 里面的sh 腳本可能比較適合我溃肪,特別是build-image那塊免胃,建議自行修改。
  7. 不要用容器安裝jenkins了 這個坑太大了惫撰,gitlab還是容器安裝爽杜秸。
  8. 最后在說一點,jenkins的pipline語法不復(fù)雜润绎,參考我的寫你可以可以完成自動化構(gòu)建,push鏡像诞挨,更新服務(wù)這塊其實也沒完全弄好莉撇,我準(zhǔn)備在繼續(xù)好好研究下k8s,感覺k8s水太深惶傻,下次出專輯深啃一把棍郎!
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市银室,隨后出現(xiàn)的幾起案子涂佃,更是在濱河造成了極大的恐慌,老刑警劉巖蜈敢,帶你破解...
    沈念sama閱讀 216,402評論 6 499
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件辜荠,死亡現(xiàn)場離奇詭異,居然都是意外死亡抓狭,警方通過查閱死者的電腦和手機(jī)伯病,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,377評論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來否过,“玉大人午笛,你說我怎么就攤上這事∶绻穑” “怎么了药磺?”我有些...
    開封第一講書人閱讀 162,483評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長煤伟。 經(jīng)常有香客問我癌佩,道長,這世上最難降的妖魔是什么便锨? 我笑而不...
    開封第一講書人閱讀 58,165評論 1 292
  • 正文 為了忘掉前任驼卖,我火速辦了婚禮,結(jié)果婚禮上鸿秆,老公的妹妹穿的比我還像新娘酌畜。我一直安慰自己,他們只是感情好卿叽,可當(dāng)我...
    茶點故事閱讀 67,176評論 6 388
  • 文/花漫 我一把揭開白布桥胞。 她就那樣靜靜地躺著恳守,像睡著了一般。 火紅的嫁衣襯著肌膚如雪贩虾。 梳的紋絲不亂的頭發(fā)上催烘,一...
    開封第一講書人閱讀 51,146評論 1 297
  • 那天,我揣著相機(jī)與錄音缎罢,去河邊找鬼伊群。 笑死,一個胖子當(dāng)著我的面吹牛策精,可吹牛的內(nèi)容都是我干的舰始。 我是一名探鬼主播,決...
    沈念sama閱讀 40,032評論 3 417
  • 文/蒼蘭香墨 我猛地睜開眼咽袜,長吁一口氣:“原來是場噩夢啊……” “哼丸卷!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起询刹,我...
    開封第一講書人閱讀 38,896評論 0 274
  • 序言:老撾萬榮一對情侶失蹤谜嫉,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后凹联,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體沐兰,經(jīng)...
    沈念sama閱讀 45,311評論 1 310
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,536評論 2 332
  • 正文 我和宋清朗相戀三年蔽挠,在試婚紗的時候發(fā)現(xiàn)自己被綠了僧鲁。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,696評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡象泵,死狀恐怖寞秃,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情偶惠,我是刑警寧澤春寿,帶...
    沈念sama閱讀 35,413評論 5 343
  • 正文 年R本政府宣布,位于F島的核電站忽孽,受9級特大地震影響绑改,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜兄一,卻給世界環(huán)境...
    茶點故事閱讀 41,008評論 3 325
  • 文/蒙蒙 一厘线、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧出革,春花似錦造壮、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,659評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽成箫。三九已至,卻和暖如春旨枯,著一層夾襖步出監(jiān)牢的瞬間蹬昌,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,815評論 1 269
  • 我被黑心中介騙來泰國打工攀隔, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留皂贩,地道東北人。 一個月前我還...
    沈念sama閱讀 47,698評論 2 368
  • 正文 我出身青樓昆汹,卻偏偏與公主長得像明刷,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子筹煮,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,592評論 2 353

推薦閱讀更多精彩內(nèi)容