Docker技術從2013年誕生到目前已經4年有余了。對于已經接納和使用Docker技術在日常開發工作中的開發者而言,構建Docker鏡像已經是家常便飯。但這是否意味著Docker的image構建機制已經相對完美了呢?不是的,Docker官方依舊在持續優化鏡像構建機制。這不,從今年發布的Docker 17.05版本起,Docker開始支持容器鏡像的多階段構建(multi-stage build)了。
什么是鏡像多階段構建呢?直接給出概念定義太突兀,這里先賣個關子,我們先從日常開發中用到的鏡像構建的方式和所遇到的鏡像構建的問題說起。
一、同構的鏡像構建
我們在做鏡像構建時的一個常見的場景就是:應用在開發者自己的開發機或服務器上直接編譯,編譯出的二進制程序再打入鏡像。這種情況一般要求編譯環境與鏡像所使用的base image是兼容的,比如說:我在Ubuntu 14.04上編譯應用,并將應用打入基于ubuntu系列base image的鏡像。這種構建我稱之為“同構的鏡像構建”,因為應用的編譯環境與其部署運行的環境是兼容的:我在Ubuntu 14.04下編譯出來的應用,可以基本無縫地在基于ubuntu:14.04及以后版本base image鏡像(比如:16.04、16.10、17.10等)中運行;但在不完全兼容的base image中,比如centos中就可能會運行失敗。
1、同構鏡像構建舉例
這里舉個同構鏡像構建的例子(后續的章節也是基于這個例子的),注意:我們的編譯環境為Ubuntu 16.04 x86_64虛擬機、Go 1.8.3和docker 17.09.0-ce。
我們用一個Go語言中最常見的http server作為例子:
編譯這個程序:
這個例子看起來很簡單,也沒幾行代碼,但背后Go net/http包在底層做了大量的事情,包括很多系統調用,能夠反映出應用與操作系統的“耦合”,這在后續的講解中會體現出來。接下來我們就來為這個程序構建一個docker image,并基于這個image來啟動一個myhttpserver容器。我們選擇ubuntu:14.04作為base image:
以上是最基本的image build方法。
接下來,我們可能會遇到如下需求:
* 搭建一個Go程序的構建環境有時候是很耗時的,尤其是對那些依賴很多第三方開源包的Go應用來說,下載包就需要很長時間。我們最好將這些易變的東西統統打包到一個用于Go程序構建的builder image中;
* 我們看到上面我們構建出的myrepo/myhttpserver image的SIZE是200MB,這似乎有些過于“龐大”了。雖然每個主機node上的docker有cache image layer的能力,但我們還是希望能build出更加精簡短小的image。
2、借助golang builder image
Docker Hub上提供了一個帶有go dev環境的官方golang image repository,我們可以直接使用這個golang builder image來輔助構建我們的應用image;對于一些對第三方包依賴較多的Go應用,我們也可以以這個golang image為base image定制我們自己的專用builder image。
我們基于golang:latest這個base image構建我們的golang-builder image,我們編寫一個Dockerfile.build用于build golang-builder image:
在同目錄下構建golang-builder image:
接下來,我們就基于golang-builder中已經build完畢的myhttpserver來構建我們最終的應用image:
這段命令的邏輯就是從基于golang-builder image啟動的容器appsource中將已經構建完畢的myhttpserver拷貝到主機當前目錄中,然后刪除臨時的container appsource以及上面構建的那個golang-builder image;最后的步驟和第一個例子一樣,基于本地目錄中的已經構建完的myhttpserver構建出最終的image。為了方便,你也可以將這一系列命令放到一個Makefile中去。
3、使用size更小的alpine image
builder image并不能幫助我們為最終的應用image“減重”,myhttpserver image的Size依舊停留在200MB。要想“減重”,我們需要更小的base image,我們選擇了alpine。Alpine image的size不到4M,再加上應用的size,最終應用Image的Size估計可以縮減到20M以下。
結合builder image,我們只需將Dockerfile的base image改為alpine:latest:
構建alpine版應用image:
16.3MB,Size的確降下來了!我們基于該image啟動一個容器,看應用運行是否有什么問題:
容器啟動失敗了!為什么呢?因為alpine image并非ubuntu環境的同構image。我們在下面詳細說明。
二、異構的鏡像構建
我們的image builder: myrepo/golang-builder:latest是基于golang:latest這個image。golang base image有兩個模板:Dockerfile-debain.template和Dockerfile-alpine.template。而golang:latest是基于debian模板的,與ubuntu兼容。構建出來的myhttpserver對動態共享鏈接庫的情況如下:
debian系的linux distribution使用了glibc。但alpine則不同,alpine使用的是musl libc的實現,因此當我們運行上面的那個容器時,加載器因找不到myhttpserver依賴的libc.so.6而失敗退出。
這種構建環境與運行環境不兼容的情況我這里稱之為“異構的鏡像構建”。那么如何解決這個問題呢?我們繼續看:
1、靜態構建
在主流編程語言中,Go的移植性已經是數一數二的了,尤其是Go 1.5之后,Go將runtime中的C代碼都用Go重寫了,對libc的依賴已經降到最低了,但仍有一些feature提供了兩個版本的實現:C實現和Go實現。并且默認情況下,即在CGO_ENABLED=1的情況下,程序和預編譯的標準庫都采用了C的實現。關于這方面的詳細論述請參見我之前寫的《也談Go的可移植性》一文,這里就不贅述了。于是采用了不同libc實現的debian系和alpine系自然存在不兼容的情況。要解決這個問題,我們首先考慮對Go程序進行靜態構建,然后將靜態構建后的Go應用放入alpine image中。
我們修改一下Dockerfile.build,在編譯Go源文件時加上CGO_ENABLED=0:
構建這個builder image:
接下來,我們再基于golang-static-builder中已經build完畢的靜態連接的myhttpserver來構建我們最終的應用image:
運行新image:
Note: 我們可以用strace來證明靜態連接時Go只使用的是Go自己的runtime實現,而并未使用到libc.a中的代碼:
打開go-static-build-strace-file-open.txt文件查看文件內容,你不會找到libc.a這個文件(在Ubuntu下,一般libc.a躺在/usr/lib/x86_64-linux-gnu/下面),這說明go build根本沒有嘗試去open libc.a文件并獲取其中的符號定義。
2、使用alpine golang builder
我們的Go應用運行在alpine based的container中,我們可以使用alpine golang builder來構建我們的應用(無需靜態鏈接)。前面提到過golang有alpine模板:
alpine版golang builder的Dockerfile內容如下:
后續的操作與前面golang builder的操作并不二致:利用alpine golang builder構建我們的應用,并將其打入alpine image,這里就不贅述了。
三、多階段鏡像構建:提升開發者體驗
在Docker 17.05以前,我們都是像上面那樣構建鏡像的。你會發現即便采用異構image builder模式,我們也要維護兩個Dockerfile,并且還要在docker build命令之外執行一些諸如從容器內copy應用程序、清理build container和build image等的操作。Docker社區看到了這個問題,于是實現了多階段鏡像構建機制(multi-stage)。
我們先來看一下針對上面例子,multi-stage build所使用Dockerfile:
看完這個Dockerfile的內容,你的第一趕腳是不是把之前的兩個Dockerfile合并在一塊兒了,每個Dockerfile單獨作為一個“階段”!事實也是這樣,但這個Docker也多了一些新的語法形式,用于建立各個“階段”之間的聯系。針對這樣一個Dockerfile,我們應該知道以下幾點:
-
支持Multi-stage build的Dockerfile在以往的多個build階段之間建立內在連接,讓后一個階段構建可以使用前一個階段構建的產物,形成一條構建階段的chain;
-
Multi-stages build的最終結果僅產生一個image,避免產生冗余的多個臨時images或臨時容器對象,這正是我們所需要的:我們只要結果。
我們來使用multi-stage來build一下上述例子:
我們來Run一下這個image:
四、小結
多階段鏡像構建可以讓開發者通過一個Dockerfile,一次性地、更容易地構建出size較小的image,體驗良好并且更容易接入CI/CD等自動化系統。不過當前多階段構建僅是在Docker 17.05及之后的版本中才能得到支持。如果想學習和實踐這方面功能,但又沒有環境,可以使用play-with-docker提供的實驗環境。
Play with Docker labs
核心關注:拓步ERP系統平臺是覆蓋了眾多的業務領域、行業應用,蘊涵了豐富的ERP管理思想,集成了ERP軟件業務管理理念,功能涉及供應鏈、成本、制造、CRM、HR等眾多業務領域的管理,全面涵蓋了企業關注ERP管理系統的核心領域,是眾多中小企業信息化建設首選的ERP管理軟件信賴品牌。
轉載請注明出處:拓步ERP資訊網http://www.guhuozai8.cn/
本文標題:理解Docker的多階段鏡像構建
本文網址:http://www.guhuozai8.cn/html/solutions/14019321350.html