GitLab+Docker 通過(guò) CI/CD 實(shí)現(xiàn)自動(dòng)化部署

步驟簡(jiǎn)介

1 準(zhǔn)備工作

  • 1.1. gitlab環(huán)境
  • 1.2. 裝有dockergitlab-runner環(huán)境的云服務(wù)器(這里用到CentOS 7 64位
  • 1.3. 項(xiàng)目代碼
  • 1.4. Dockerfile
  • 1.5. .gitlab-ci.yml

2 環(huán)境配置

  • 2.1. 配置權(quán)限
  • 2.2. 為項(xiàng)目注冊(cè)執(zhí)行部署任務(wù)的Runner服務(wù)器

3 自動(dòng)部署

  • 3.1. 提交代碼到git master分支
  • 3.2. 等待Job任務(wù)完成
  • 3.3 測(cè)試結(jié)果

背景

在網(wǎng)上查了很多資料,很大一部分資料,只是寫了一部分,或者是個(gè)例的文檔,不具備普適性。

本文做一個(gè)各種雜亂文章的整合和補(bǔ)充。

資料順序:

  1. 官方文檔
  2. 各種博客

官方文檔中是說(shuō)有三種方法可以實(shí)現(xiàn)gitlab ci 和 docker 的配置,本文寫的是第一種使用 shell的方式,這種也是最簡(jiǎn)單的一種方式。

簡(jiǎn)介

gitlab-ci全稱是gitlab continuous integration的意思,也就是持續(xù)集成。中心思想是當(dāng)每一次push到gitlab的時(shí)候,都會(huì)觸發(fā)一次腳本執(zhí)行,然后腳本的內(nèi)容包括了測(cè)試,編譯,部署等一系列自定義的內(nèi)容。本文就是利用gitlab-ci的持續(xù)集成來(lái)實(shí)現(xiàn)自動(dòng)部署。相比之前webhook的自動(dòng)部署還是強(qiáng)大以及方便了許多。

原理

自動(dòng)部署涉及了若干個(gè)角色,主要介紹如下

  • GitLab-CI
    這個(gè)是一套配合GitLab使用的持續(xù)集成系統(tǒng),是GitLab自帶的,也就是你裝GitLab的那臺(tái)服務(wù)器上就帶有的。無(wú)需多考慮。.gitlab-ci.yml的腳本解析就由它來(lái)負(fù)責(zé)。
  • GitLab-Runner
    這個(gè)是腳本執(zhí)行的承載者,.gitlab-ci.yml的script部分的運(yùn)行就是由runner來(lái)負(fù)責(zé)的。GitLab-CI瀏覽過(guò)項(xiàng)目里的.gitlab-ci.yml文件之后,根據(jù)里面的規(guī)則,分配到各個(gè)Runner來(lái)運(yùn)行相應(yīng)的腳本script。這些腳本有的是測(cè)試項(xiàng)目用的,有的是部署用的。
  • .gitlab-ci.yml
    這個(gè)是在git項(xiàng)目的根目錄下的一個(gè)文件,記錄了一系列的階段和執(zhí)行規(guī)則。GitLab-CI在push后會(huì)解析它,根據(jù)里面的內(nèi)容調(diào)用runner來(lái)運(yùn)行。

1 準(zhǔn)備工作

1.1 gitlab環(huán)境

這個(gè)可以搭建私有g(shù)itlab空間,或者為了方便,可以使用官方的托管倉(cāng)庫(kù)。

gitlab 倉(cāng)庫(kù)搭好后,gitlab ci 就自動(dòng)安裝好了。(老版本不適用)

1.2 裝有dockergitlab-runner環(huán)境的云服務(wù)器

$ curl -L https://packages.gitlab.com/install/repositories/runner/gitlab-ci-multi-runner/script.rpm.sh | sudo bash
$ yum install gitlab-ci-multi-runner

這樣就裝好了gitlab-ci-multi-runner

1.3 項(xiàng)目代碼

寫個(gè)helloworld就可。

1.4Dockerfile文件

首先是項(xiàng)目要添加docker支持,然后添加好Dockerfile文件,這個(gè)文件根據(jù)項(xiàng)目的不同可能略有不同,這個(gè)是springboot項(xiàng)目(hello-docker)的Dockerfile:

FROM openjdk:8-jdk-alpine
VOLUME /tmp
ADD hello-docker-0.0.1-SNAPSHOT.jar app.jar
ENTRYPOINT ["java","-Djava.security.egd=file:/dev/./urandom","-jar","/app.jar"]

1.5. .gitlab-ci.yml文件

gitlab提供了一個(gè)很方便的配置工具,就是.gitlab-ci.yml, 將該文件放入到project的根目錄下即可。

以 Java springboot 項(xiàng)目為例,要配置一個(gè)生成 docke r鏡像的 job, 每次對(duì) project 打 tag 的時(shí)候就會(huì)觸發(fā) job 執(zhí)行,生成一個(gè)鏡像,鏡像的 version 是 tag的name.

.gitlab-ci.yml的內(nèi)容如下:

# 腳本執(zhí)行之后刪除該鏡像(為了不與下次鏡像打包沖突)
after_script:
  - docker rmi $( docker images -q -f dangling=true)

# 定義幾個(gè)流程(job),這里是定義了三個(gè)自動(dòng)化流程
stages:
  - build
  - test
  - deploy

job_build:
  stage: build
  script:
    - mvn clean install

job_test:
  stage: test
  script:
    - mvn test

job_deploy:
  stage: deploy
  script:
    # 通過(guò)Dockerfile生成鏡像
    - mvn package docker:build
    # 刪除已經(jīng)在運(yùn)行的容器
    - if [ $(docker ps -aq --filter name=hello-docker) ]; then docker rm -f hello-docker;fi
    # 通過(guò)鏡像啟動(dòng)容器,并把本機(jī)端口映射到容器端口
    - docker run -d -p 8070:8070 --name hello-docker gyq/hello-docker
  only:
    - master

only 規(guī)定了只有g(shù)it tags操作和triggers才能觸發(fā)任務(wù)

triggers可以在gitlab的project->settings->CI/DI Pipelines下添加,添加之后會(huì)生成一個(gè)token,使用這個(gè)token就可以隨時(shí)觸發(fā)一次job了,在測(cè)試的時(shí)候非常有用

tags 用來(lái)篩選符合條件的runners

默認(rèn)的script運(yùn)行的位置是project的根目錄,runner會(huì)先將整個(gè)project取下來(lái),然后在project根目錄下運(yùn)行job.

更多.gitlab-ci.yml文件的用法可以參考官方的配置文檔

2 環(huán)境配置

2.1 配置權(quán)限

在runner上運(yùn)行任務(wù)的時(shí)候使用的是gitlab-runner賬戶,該賬戶沒(méi)有root權(quán)限,如果想使用更高的權(quán)限可以對(duì)gitlab-runner賬戶進(jìn)行提權(quán)。

這里因?yàn)橹挥衐ocker命令需要更高的權(quán)限,可以使用創(chuàng)建docker用戶組的方式解決。在runner上使用root賬戶執(zhí)行如下命令:

usermod -aG docker gitlab-runner

驗(yàn)證是否gitlab-runner有權(quán)訪問(wèn)Docker:

sudo -u gitlab-runner -H docker info

當(dāng)然也可以直接切換到 gitlab-runner 用戶中,查看 docker命令有沒(méi)有權(quán)限

權(quán)限這個(gè)問(wèn)題很重要,請(qǐng)務(wù)必設(shè)置

2.2 為項(xiàng)目注冊(cè)執(zhí)行部署任務(wù)的Runner服務(wù)器

向gitlab-CI注冊(cè)這個(gè)runner,不然gitlab-CI在push事件到來(lái)的時(shí)候怎么知道要調(diào)用誰(shuí)呢?這里也可以發(fā)現(xiàn)和webhook方式的區(qū)別,webhook方式是我們主動(dòng)配置了一個(gè)連接給gitlab;gitlab-runner只要注冊(cè)一下就好了。

那么我們就注冊(cè)一下

$ gitlab-ci-multi-runner register
#引導(dǎo)會(huì)讓你輸入gitlab的url,輸入自己的url,例如http://gitlab.example.com/
#引導(dǎo)會(huì)讓你輸入token,去相應(yīng)的項(xiàng)目下找到token,例如ase12c235qazd32
#引導(dǎo)會(huì)讓你輸入tag,一個(gè)項(xiàng)目可能有多個(gè)runner,是根據(jù)tag來(lái)區(qū)別runner的,輸入若干個(gè)就好了,比如web,hook,deploy
#引導(dǎo)會(huì)問(wèn)你是否無(wú)tag也觸發(fā)自動(dòng)部署,我這里為了方便測(cè)試,選擇的true
#引導(dǎo)會(huì)問(wèn)你是否鎖定此runner僅為此項(xiàng)目鎖定,我這里選的默認(rèn)否
#引導(dǎo)會(huì)讓你輸入executor,這個(gè)是要用什么方式來(lái)執(zhí)行腳本,輸入shell就好了。
img

然后就注冊(cè)好了,在gitlab中相應(yīng)的位置就可以看到你注冊(cè)好的runner信息。

3 提交更新,自動(dòng)部署

3.1. 提交代碼到git master分支

runner注冊(cè)成功后,通過(guò)git命令提交更新到master分支,只要master分支有修改,都會(huì)執(zhí)行Job的任務(wù)。

3.2. 等待Job任務(wù)完成

在gitlab頁(yè)面可以看到j(luò)ob的狀態(tài),以及日志

3.3 測(cè)試結(jié)果

查看端口,檢查代碼的更新情況


參考文檔

[后端]gitlab之gitlab-ci自動(dòng)部署

GitLab-CI與GitLab-Runner

[如何在gitlab持續(xù)集成中使用docker]

使用Gitlab CI/DI 自動(dòng)生成docker鏡像

GitLab+Docker快速搭建CI/CD自動(dòng)化部署

[Docker啟動(dòng)Get Permission Denied]

linux添加用戶或給用戶添加root權(quán)限

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 229,698評(píng)論 6 539
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 99,202評(píng)論 3 426
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人,你說(shuō)我怎么就攤上這事。” “怎么了?”我有些...
    開(kāi)封第一講書人閱讀 177,742評(píng)論 0 382
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書人閱讀 63,580評(píng)論 1 316
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 72,297評(píng)論 6 410
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書人閱讀 55,688評(píng)論 1 327
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,693評(píng)論 3 444
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書人閱讀 42,875評(píng)論 0 289
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 49,438評(píng)論 1 335
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 41,183評(píng)論 3 356
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 43,384評(píng)論 1 372
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,931評(píng)論 5 363
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,612評(píng)論 3 348
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 35,022評(píng)論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 36,297評(píng)論 1 292
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 52,093評(píng)論 3 397
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 48,330評(píng)論 2 377

推薦閱讀更多精彩內(nèi)容