衡阳派盒市场营销有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

新一代更強大的鏡像構建工具Earthly

馬哥Linux運維 ? 來源:馬哥Linux運維 ? 2023-03-30 11:21 ? 次閱讀
一、Earthly 介紹

開局一張圖,功能全靠吹。

dfcaa480-ce59-11ed-bfe3-dac502259ad0.png

Earthly 是一個更加高級的 Docker 鏡像構建工具,Earthly 通過自己定義的 Earthfile 來代替傳統的 Dockerfile 完成鏡像構建;Earthfile 就如同 Earthly 官方所描述:

Makefile + Dockerfile = Earthfile

在使用 Earthly 進行構建鏡像時目前強依賴于 buildkit,Earthly 通過 buildkit 支持了一些 Dockerfile 的擴展語法,同時將 Dockerfile 與 Makefile 整合,使得多平臺構建和代碼化 Dockerfile 變得更加簡單;使用 Earthly 可以更加方便的完成 Dockerfile 的代碼復用以及更加友好的 CI 自動集成。

二、快速開始

2.1、安裝依賴

Earthly 目前依賴于 Docker 和 Git,所以安裝 Earthly 前請確保機器已經安裝了 Docker 和 Git。

2.2、安裝 Earthly

Earthly 采用 Go 編寫,所以主要就一個二進制文件,Linux 下安裝可以直接參考官方的安裝腳本:

$ sudo /bin/sh -c 'wget https://github.com/earthly/earthly/releases/latest/download/earthly-linux-amd64 -O /usr/local/bin/earthly && chmod +x /usr/local/bin/earthly && /usr/local/bin/earthly bootstrap --with-autocomplete'

安裝完成后 Earthly 將會啟動一個 buildkitd 容器: earthly-buildkitd。

2.3、語法高亮

目前 Earthly 官方支持 VS Code、VIM 以及 Sublime Text 三種編輯器的語法高亮,具體如何安裝請參考 官方文檔[1]。

2.4、基本使用

本示例源于官方 Basic 教程,以下示例以編譯 Go 項目為樣例:

首先創建一個任意名稱的目錄,目錄中存在項目源碼文件以及一個 Earthfile 文件;

main.go

packagemain

import"fmt"

funcmain(){
fmt.Println("helloworld")
}

Earthfile

FROMgolang:1.17-alpine
WORKDIR/go-example

build:
COPYmain.go.
RUNgobuild-obuild/go-examplemain.go
SAVEARTIFACTbuild/go-example/go-exampleASLOCALbuild/go-example

docker:
COPY+build/go-example.
ENTRYPOINT["/go-example/go-example"]
SAVEIMAGEgo-example:latest

有了 Earthfile 以后我們就可以使用 Earthly 將其打包為鏡像;

#目錄結構
~/t/earthlytest???tree
.
├──Earthfile
└──main.go

0directories,2files

#通過earthly進行構建
~/t/earthlytest???earthly+docker

dff2a75a-ce59-11ed-bfe3-dac502259ad0.png

構建完成后我們就可以直接從 docker 的 images 列表中查看剛剛構建的鏡像,并運行:

e03608a6-ce59-11ed-bfe3-dac502259ad0.png

三、進階使用

3.1、多階段構建

Earthfile 中包含類似 Makefile 一樣的 target,不同的 target 之間還可以通過特定語法進行引用,每個 target 都可以被單獨執行,執行過程中 earthly 會自動解析這些依賴關系。

這種多階段構建時語法很彈性,我們可以在每個階段運行獨立的命令以及使用不同的基礎鏡像;從快速開始中可以看到,我們始終使用了一個基礎鏡像(golang:1.17-alpine),對于 Go 這種編譯后自帶運行時不依賴其語言 SDK 的應用,我們事實上可以將 “發布物” 僅放在簡單的運行時系統鏡像內,從而減少最終鏡像體積:

e066d7c4-ce59-11ed-bfe3-dac502259ad0.png

由于使用了多個 target,所以我們可以單獨的運行 build 這個 target 來驗證我們的編譯流程,這種多 target 的設計方便我們構建應用時對編譯、打包步驟的細化拆分,同時也方便我們進行單獨的驗證。例如我們單獨執行 build 這個 target 來驗證我們的編譯流程是否正確:

e098bab4-ce59-11ed-bfe3-dac502259ad0.png

在其他階段驗證完成后,我們可以直接運行最終的 target,earthly 會自動識別到這種依賴關系從而自動運行其依賴的 target:

e0e47788-ce59-11ed-bfe3-dac502259ad0.png

3.2、擴展指令

3.2.1、SAVE

SAVE 指令是 Earthly 自己的一個擴展指令,實際上分為 SAVE ARTIFACT 和 SAVE IMAGE;其中 SAVE ARTIFACT 指令格式如下:

SAVEARTIFACT[--keep-ts][--keep-own][--if-exists][--force][][ASLOCAL<local-path>]

SAVE ARTIFACT 指令用于將文件或目錄從 build 運行時環境保存到 target 的 artifact 環境;當保存到 artifact 環境后,可以通過 COPY 等命令在其他位置進行引用,類似于 Dockerfile 的 COPY --from... 語法;不同的是 SAVE ARTIFACT 支持 AS LOCAL附加參數,一但指定此參數后,earthly 會同時將文件或目錄在宿主機復制一份,一般用于調試等目的。SAVE ARTIFACT 命令在上面的樣例中已經展示了,在運行完 earthly +build 命令后實際上會在本地看到被 SAVE 出來的 ARTIFACT:

e12cb688-ce59-11ed-bfe3-dac502259ad0.png

而另一個 SAVE IMAGE 指令則主要用于將當前的 build 環境 SAVE 為一個 IMAGE,如果指定了 --push 選項,同時在執行 earthly +target 命令時也加入 --push 選項,該鏡像將會自動被推送到目標 Registry 上。SAVE IMAGE 指令格式如下:

SAVEIMAGE[--cache-from=][--push]...

e166a758-ce59-11ed-bfe3-dac502259ad0.png

3.2.2、GIT CLONE

GIT CLONE 指令用于將指定 git 倉庫 clone 到 build 環境中;與 RUN git clone... 命令不同的是,GIT CLONE 通過宿主機的 git 命令運行,它不依賴于容器內的 git 命令,同時還可以直接為 earthly 配置 git 認證,從而避免將這些安全信息泄漏到 build 環境中;關于如何配置 earthly 的 git 認證請參考 官方文檔[2];下面是 GIT CLONE 指令的樣例:

e1c2b14c-ce59-11ed-bfe3-dac502259ad0.png

3.2.3、COPY

COPY 指令與標準的 Dockerfile COPY 指令類似,除了支持 Dockerfile 標準的 COPY 功能以外,earthly 中的 COPY 指令可以引用其他 target 環節產生的 artifact,在引用時會自動聲明依賴關系;即當在 B target 中存在 COPY +A/xxxxx /path/to/copy 類似的指令時,如果只單純的執行 earthly +B,那么 earthly 根據依賴分析會得出在 COPY 之前需要執行 target A。COPY 指令的語法格式如下:

#與Dockerfile相同的使用方式,從上下文復制
COPY[options...]...

#擴展支持的從target復制方式
COPY[options...]...

3.2.4、RUN

RUN 指令在標準使用上與 Dockerfile 里保持一致,除此之外增加了更多的擴展選項,其指令格式如下:

#shell方式運行(/bin/sh-c)
RUN[--push][--entrypoint][--privileged][--secret=][--ssh][--mount][--]<command>

#exec方式運行
RUN[[...],"","","",...]

其中 --privileged 選項允許運行的命令使用 privileged capabilities,但是需要 earthly 在運行 target 時增加 --allow-privileged 選項;--interactive / --interactive-keep 選項用于交互式執行一些命令,在完成交互后 build 繼續進行,在交互過程中進行的操作都會被持久化到 鏡像中:

e218afde-ce59-11ed-bfe3-dac502259ad0.png

限于篇幅原因,其他的具體指令請查閱官方文檔 Earthfile reference[3]。

3.3、UDCS

UDCs 全稱 “User-defined commands”,即用戶定義指令;通過 UDCs 我們可以將 Earthfile 中特定的命令剝離出來,從而實現更加通用和統一的代碼復用;下面是一個定義 UDCs 指令的樣例:

#定義一個Command
#注意:語法必須滿足以下規則
#1、名稱全大寫
#2、名稱下劃線分割
#3、首個命令必須為COMMAND(后面沒有冒號)
MY_COPY:
COMMAND
ARGsrc
ARGdest=./
ARGrecursive=false
RUNcp$(if$recursive="true";thenprintf---r;fi)"$src""$dest"

#target中引用
build:
FROMalpine:3.13
WORKDIR/udc-example
RUNecho"hello">./foo
#通過DO關鍵字引用UDCs
DO+MY_COPY--src=./foo--dest=./bar
RUNcat./bar#prints"hello"

UDCs 不光可以定義在一個 Earthfile 中,UDCs 可以跨文件、跨目錄引用:

e26ed74c-ce59-11ed-bfe3-dac502259ad0.png

有了 UDCs 以后,我們可以通過這種方式將對基礎鏡像的版本統一控制、對特殊鏡像的通用處理等操作全部抽象出來,然后每個 Earthfile 根據需要進行引用;關于 UDCs 的使用樣例可以參考我的 autobuild[4] 項目,其中的 udcs[5] 目錄定義了大量的通用 UDCs,這些 UDCs 被其他目標鏡的 Earthfile 批量引用。

3.4、多平臺構建

在以前使用 Dockerfile 的時候,我們需要自己配置然后開啟 buildkit 來實現多平臺構建;在配置過程中可能會很繁瑣,現在使用 earthly 可以默認幫我們實現多平臺的交叉編譯,我們需要做的僅僅是在 Earthfile 中聲明需要支持哪些平臺而已:

e2d3975e-ce59-11ed-bfe3-dac502259ad0.png

以上 Earthfile 在執行 earthly --push +all 構建時,將會自動構建四個平臺的鏡像,并保持單個 tag,同時由于使用了 --push 選項還會自動推送到 Docker Hub 上:

e2f7ad10-ce59-11ed-bfe3-dac502259ad0.png

四、總結

Earthly 彌補了 Dockerfile 的很多不足,解決了很多痛點問題;但同樣可能需要一些學習成本,但是如果已經熟悉了 Dockerfile 其實學習成本不高;所以目前還是比較推薦將 Dockerfile 切換為 Earthfile 進行統一和版本化管理的。本文由于篇幅所限(懶)很多地方沒有講,比如共享緩存等,所以關于 Earthly 更多的詳細使用等最好還是仔細閱讀一下官方文檔[6]。

審核編輯 :李倩



聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 編輯器
    +關注

    關注

    1

    文章

    806

    瀏覽量

    31290
  • 語法
    +關注

    關注

    0

    文章

    44

    瀏覽量

    9865
  • Docker
    +關注

    關注

    0

    文章

    492

    瀏覽量

    11963

原文標題:新一代更強大的鏡像構建工具 Earthly

文章出處:【微信號:magedu-Linux,微信公眾號:馬哥Linux運維】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    Zephyr的構建工具

    給大家介紹下Zephyr的構建工具們:
    的頭像 發表于 12-05 09:51 ?788次閱讀
    Zephyr的<b class='flag-5'>構建工具</b>

    AMD談新一代Zen處理器:更高的IPC,更強超頻能力

    問題。AMD桌面CPU市場總監Don Woligroski在接受Joker Production的采訪中表示,將來的Zen架構處理器會有更高的IPC和更強的超頻能力?! MD談新一代Zen處理器:更高
    發表于 09-07 09:43

    新一代納秒級高帶寬仿真工具平臺HAC Express的優勢

    新一代納秒級高帶寬仿真工具平臺——HAC Express
    發表于 01-11 06:47

    常用根文件系統構建工具有哪些

    11、/mnt目錄12、/tmp目錄二、常用根文件系統構建工具簡介1、BusyBox工具2、Buildroot工具3、Yocto工具、簡介
    發表于 11-05 07:28

    RT-Thread系統中的Scons構建工具資料推薦

    1 構建工具(系統)1.1 什么是構建工具(系統)構建工具 (software construction tool) 是種軟件,它可以根據
    發表于 05-07 15:35

    介紹款非常方便的java領域docker鏡像構建工具

    前言本文主要介紹的是google開源的個java領域的docker構建工具jib.目前在github上的start有8.5k,fork有784,是款非常方便的java領域docker構建工
    發表于 07-19 17:41

    RVCT 3.0 SP1構建工具-錯誤和警告

    RVCT 1.2,請參考“ADS 1.2構建工具-錯誤和警告”文檔。 如果您使用的是RVCT的早期版本,那么可以將此作為第個參考來源,但“RVCT2.0構建工具-錯誤和警告”也可能有用。
    發表于 08-16 06:30

    面向Eclips的Nios II軟件構建工具手冊

    面向Eclips的Nios II軟件構建工具手冊 The Nios II Software Build Tools (SBT) for Eclipse is a set of plugins
    發表于 10-17 15:43 ?37次下載

    使用Nios II軟件構建工具

    使用Nios II軟件構建工具 This chapter describes the Nios II Software Build Tools (SBT), a set of utilities
    發表于 10-17 15:49 ?20次下載

    Nios II軟件構建工具入門

    Nios II軟件構建工具入門 The Nios II Software Build Tools (SBT) allows you to construct a wide variety
    發表于 10-17 15:51 ?29次下載

    跨平臺構建工具xmake簡介與安裝使用說明

    大家好,我是ZhengN。本次給大家分享個優秀的跨平臺構建工具
    的頭像 發表于 07-19 15:52 ?6204次閱讀

    鏡像構建Dockerfile的介紹

    Dockerfile 是個用來構建鏡像的文本文件,文本內容包含了條條構建鏡像所需的指令和說明
    的頭像 發表于 09-06 09:36 ?1203次閱讀

    推薦款現代高效的java構建工具

    相信使用Java的同學都用過Maven,這是個非常經典好用的項目構建工具
    的頭像 發表于 02-24 11:22 ?769次閱讀

    RT-Thread CMake構建工具

    RT Thread原生使用的構建工具是SCons,編譯工具鏈使用官方提供的env工具,內含多種嵌入式常用的編譯環境和腳本,可以算得上環境萬能百寶箱。
    的頭像 發表于 10-12 17:06 ?758次閱讀
    RT-Thread CMake<b class='flag-5'>構建工具</b>

    手動構建Docker鏡像的方法

    不推薦使用docker commit命令,而應該使用更靈活、更強大的dockerfile來構建docker鏡像。
    的頭像 發表于 08-05 15:30 ?590次閱讀
    手動<b class='flag-5'>構建</b>Docker<b class='flag-5'>鏡像</b>的方法
    百家乐官网六手变化混合赢家打法 | 汉百家乐官网春| 百家乐官网代理商博彩e族| 六合彩今晚开什么| 请问下百家乐去哪个娱乐城玩最好呢 | 玩百家乐官网如何硬| 大石桥市| 千亿百家乐的玩法技巧和规则| 棋牌百家乐赢钱经验技巧评测网| 线上百家乐官网手机版| 百家乐官网技巧微笑心法| 独赢百家乐官网全讯网| 来宾市| 京城国际娱乐城| 大发888中文官网| 太阳城假日酒店| 新东方百家乐的玩法技巧和规则 | 零点棋牌官方下载| 大发888娱乐城官网lm0| 老k百家乐的玩法技巧和规则| 太阳城百家乐手机投注| 有看做生意风水的大师吗| 蓝盾百家乐官网娱乐场开户注册| 现场百家乐官网投注| 百家乐官网百家乐官网视频| 贡嘎县| 注册娱乐城送彩金| 大发888线上| 大发888下载网址| 威尼斯人娱乐城评价| 游戏百家乐的玩法技巧和规则| 玩百家乐秘诀| 什么百家乐平注法| 百家乐中B是什么| 百家乐赢钱皇冠| 百家乐单跳打法| 凯时百家乐技巧| 网上百家乐危险| 24山安葬择日| 24山向中那个向最好| 加州百家乐娱乐城|