BuildKit

目录

概述

BuildKit 是一个改进的后端，用于替换旧的构建器。从 23.0 版本开始，BuildKit 是 Docker Desktop 和 Docker Engine 的默认构建器。

BuildKit 提供了新的功能并提高了构建的性能。它还引入了对处理更复杂场景的支持。

  • 检测并跳过执行未使用的构建阶段
  • 并行构建独立的构建阶段
  • 在构建之间增量传输构建上下文中仅更改的文件
  • 检测并跳过传输构建上下文中未使用的文件
  • 使用具有许多新功能的Dockerfile 前端实现
  • 避免与其余 API 发生副作用（中间镜像和容器）
  • 优先考虑您的构建缓存以进行自动修剪

除了许多新功能外，BuildKit 在当前体验上的主要改进领域是性能、存储管理和可扩展性。从性能方面来看，一个重要的更新是一个全新的完全并发构建图求解器。它可以在可能的情况下并行运行构建步骤，并优化掉对最终结果没有影响的命令。我们还优化了对本地源文件的访问。通过仅跟踪在重复构建调用之间对这些文件所做的更新，无需等待读取或上传本地文件即可开始工作。

LLB

BuildKit 的核心是低级构建 (LLB) 定义格式。LLB 是一种中间二进制格式，允许开发者扩展 BuildKit。LLB 定义了一个内容寻址的依赖关系图，可用于组合非常复杂的构建定义。它还支持 Dockerfile 中未公开的功能，例如直接数据挂载和嵌套调用。

构建的执行和缓存的所有内容都在 LLB 中定义。与旧的构建器相比，缓存模型已完全重写。LLB 不是使用启发式方法来比较镜像，而是直接跟踪构建图和挂载到特定操作的内容的校验和。这使其速度更快、更精确且更易于移植。构建缓存甚至可以导出到注册表，以便后续在任何主机上的调用都可以按需提取它。

可以使用golang 客户端包 直接生成 LLB。这使您可以完全掌控运行任何您可以想象的操作，但这可能不是大多数人定义构建的方式。相反，大多数用户会使用前端组件或 LLB 嵌套调用来运行一组准备好的构建步骤。

前端

前端是一个组件，它采用人类可读的构建格式并将其转换为 LLB，以便 BuildKit 可以执行它。前端可以作为镜像分发，用户可以定位保证其定义所用功能有效的特定前端版本。

例如，要使用 BuildKit 构建一个Dockerfile，你需要使用一个外部 Dockerfile 前端。

入门

对于 Docker Desktop 和 Docker Engine v23.0 及更高版本的用户，BuildKit 是默认的构建器。

如果你已安装 Docker Desktop，则无需启用 BuildKit。如果你运行的是早于 23.0 版本的 Docker Engine，则可以通过设置环境变量或将 BuildKit 设置为守护进程配置中的默认设置来启用 BuildKit。

要在运行docker build命令时设置 BuildKit 环境变量，请运行

$ DOCKER_BUILDKIT=1 docker build .

注意

Buildx 始终使用 BuildKit。

要默认使用 Docker BuildKit，请如下编辑/etc/docker/daemon.json中的 Docker 守护进程配置，然后重启守护进程。

{
  "features": {
    "buildkit": true
  }
}

如果/etc/docker/daemon.json文件不存在，请创建一个名为daemon.json的新文件，然后将以下内容添加到该文件中。然后重启 Docker 守护进程。

Windows 上的 BuildKit

警告

BuildKit 只完全支持构建 Linux 容器。Windows 容器支持处于实验阶段，其进度跟踪在moby/buildkit#616中。

从 0.13 版本开始，BuildKit 对 Windows 容器 (WCOW) 提供实验性支持。本节将引导你完成试用步骤。我们感谢你通过在此处提交问题提供的反馈，尤其关于buildkitd.exe。

已知限制

  • Windows 上的 BuildKit 目前仅支持containerd工作程序。对非 OCI 工作程序的支持跟踪在moby/buildkit#4836中。

先决条件

  • 架构：amd64、arm64（二进制文件可用，但尚未正式测试）。
  • 支持的操作系统：Windows Server 2019、Windows Server 2022、Windows 11。
  • 基础镜像：ServerCore:ltsc2019、ServerCore:ltsc2022、NanoServer:ltsc2022。请参阅此处的兼容性映射。
  • Docker Desktop 4.29 或更高版本

步骤

注意

以下命令需要在 PowerShell 终端中使用管理员（提升）权限。

  1. 启用**Hyper-V**和**容器**Windows 功能。

    > Enable-WindowsOptionalFeature -Online -FeatureName Microsoft-Hyper-V, Containers -All

    如果看到RestartNeeded为True，请重启你的机器并以管理员身份重新打开 PowerShell 终端。否则，继续下一步。

  2. 在 Docker Desktop 中切换到 Windows 容器。

    选择任务栏中的 Docker 图标，然后选择**切换到 Windows 容器...**。

  3. 按照此处的设置说明安装 containerd 1.7.7 或更高版本。

  4. 下载并解压最新的 BuildKit 版本。

    $version = "v0.13.1" # specify the release version, v0.13+
$arch = "amd64" # arm64 binary available too
curl.exe -LO https://github.com/moby/buildkit/releases/download/$version/buildkit-$version.windows-$arch.tar.gz
# there could be another `.\bin` directory from containerd instructions
# you can move those
mv bin bin2
tar.exe xvf .\buildkit-$version.windows-$arch.tar.gz
## x bin/
## x bin/buildctl.exe
## x bin/buildkitd.exe

  5. 将 BuildKit 二进制文件安装到PATH。

    # after the binaries are extracted in the bin directory
# move them to an appropriate path in your $Env:PATH directories or:
Copy-Item -Path ".\bin" -Destination "$Env:ProgramFiles\buildkit" -Recurse -Force
# add `buildkitd.exe` and `buildctl.exe` binaries in the $Env:PATH
$Path = [Environment]::GetEnvironmentVariable("PATH", "Machine") + `
    [IO.Path]::PathSeparator + "$Env:ProgramFiles\buildkit"
[Environment]::SetEnvironmentVariable( "Path", $Path, "Machine")
$Env:Path = [System.Environment]::GetEnvironmentVariable("Path","Machine") + ";" + `
    [System.Environment]::GetEnvironmentVariable("Path","User")

  6. 启动 BuildKit 守护进程。

    > buildkitd.exe

  7. 在另一个具有管理员权限的终端中，创建一个使用本地 BuildKit 守护进程的远程构建器。

    注意

    这需要 Docker Desktop 4.29 或更高版本。

    > docker buildx create --name buildkit-exp --use --driver=remote npipe:////./pipe/buildkitd
buildkit-exp

  8. 通过运行docker buildx inspect来验证构建器连接。

    > docker buildx inspect

    输出应表明构建器平台为 Windows，并且构建器的端点是一个命名管道。

    Name:          buildkit-exp
 Driver:        remote
 Last Activity: 2024-04-15 17:51:58 +0000 UTC
 Nodes:
 Name:             buildkit-exp0
 Endpoint:         npipe:////./pipe/buildkitd
 Status:           running
 BuildKit version: v0.13.1
 Platforms:        windows/amd64
...

  9. 创建一个 Dockerfile 并构建一个hello-buildkit镜像。

    > mkdir sample_dockerfile
> cd sample_dockerfile
> Set-Content Dockerfile @"
FROM mcr.microsoft.com/windows/nanoserver:ltsc2022
USER ContainerAdministrator
COPY hello.txt C:/
RUN echo "Goodbye!" >> hello.txt
CMD ["cmd", "/C", "type C:\\hello.txt"]
"@
Set-Content hello.txt @"
Hello from BuildKit!
This message shows that your installation appears to be working correctly.
"@

  10. 构建并将镜像推送到注册表。

    > docker buildx build --push -t <username>/hello-buildkit .

  11. 推送到注册表后，使用docker run运行镜像。

    > docker run <username>/hello-buildkit