包流水线：多配置

在上一节中，我们只构建了 1 个配置。本节将介绍需要构建多于 1 个配置的情况。为了方便起见，我们将在这里使用 Release 和 Debug 配置，因为这样更容易理解，但在实际情况中，这些配置更可能是 Windows、Linux、OSX，针对不同的架构构建，交叉构建等。

我们先清理缓存

$ conan remove "*" -c  # Make sure no packages from last run

我们将在我们的计算机上依次创建这 2 个配置的包，但请注意，这些通常会在不同的计算机上运行，因此 CI 系统并行启动不同配置的构建是很典型的。

Release 构建
$ cd ai  # If you were not inside "ai" folder already
$ conan create . --build="missing:ai/*" -s build_type=Release --format=json > graph.json
$ conan list --graph=graph.json --graph-binaries=build --format=json > built.json

$ conan remote enable packages
$ conan upload -l=built.json -r=packages -c --format=json > uploaded_release.json
$ conan remote disable packages

我们做了一些更改和额外的步骤

  • 第一步与上一节类似，执行 conan create，只是为了清晰起见，显式指定我们的配置 -s build_type=Release，并将 conan create 的输出捕获到 graph.json 文件中。

  • 第二步是从 graph.json 创建一个 built.json 包列表文件，其中包含需要上传的包，在这种情况下，只有从源代码构建的包 (--graph-binaries=build) 会被上传。这样做是为了提高效率并加快上传速度。

  • 第三步是启用 packages 仓库。之前未启用是为了确保所有可能的依赖项仅来自 develop 仓库。

  • 然后，我们将 built.json 包列表上传到 packages 仓库，创建一个 uploaded_release.json 包列表，其中包含包的新位置（服务器仓库）。

  • 最后，我们将再次禁用 packages 仓库

同样，Debug 构建也将执行相同的步骤

Debug 构建
$ conan create . --build="missing:ai/*" -s build_type=Debug --format=json > graph.json
$ conan list --graph=graph.json --graph-binaries=build --format=json > built.json

$ conan remote enable packages
$ conan upload -l=built.json -r=packages -c --format=json > uploaded_debug.json
$ conan remote disable packages

当 Release 和 Debug 配置都成功完成后，我们将在仓库中拥有这些包

digraph repositories { node [fillcolor="lightskyblue", style=filled, shape=box] rankdir="LR"; subgraph cluster_0 { label="Packages server"; style=filled; color=lightgrey; subgraph cluster_1 { label = "packages\n repository" shape = "box"; style=filled; color=lightblue; "packages" [style=invis]; "ai/1.1.0\n (Release)"; "ai/1.1.0\n (Debug)"; } subgraph cluster_2 { label = "products\n repository" shape = "box"; style=filled; color=lightblue; "products" [style=invis]; } subgraph cluster_3 { rankdir="BT"; shape = "box"; label = "develop repository"; color=lightblue; rankdir="BT"; node [fillcolor="lightskyblue", style=filled, shape=box] "game/1.0" -> "engine/1.0" -> "ai/1.0" -> "mathlib/1.0"; "engine/1.0" -> "graphics/1.0" -> "mathlib/1.0"; "mapviewer/1.0" -> "graphics/1.0"; "game/1.0" [fillcolor="lightgreen"]; "mapviewer/1.0" [fillcolor="lightgreen"]; } { edge[style=invis]; "packages" -> "products" -> "game/1.0" ; rankdir="BT"; } } }

当 ai/1.1.0 的所有不同二进制文件都正确构建完成后，包流水线 可以认为其任务成功，并决定提升这些二进制文件。但还需要进一步的包构建和检查，因此 包流水线 可以将它们提升到 products 二进制仓库，而不是提升到 develop 仓库。由于所有其他开发人员和 CI 都使用 develop 仓库，因此在此阶段也不会对任何人造成影响

从 packages 提升到 product
# aggregate the package list
$ conan pkglist merge -l uploaded_release.json -l uploaded_debug.json --format=json > uploaded.json

$ conan remote enable packages
$ conan remote enable products
# Promotion using Conan download/upload commands
# (slow, can be improved with art:promote custom command)
$ conan download --list=uploaded.json -r=packages --format=json > promote.json
$ conan upload --list=promote.json -r=products -c
$ conan remote disable packages
$ conan remote disable products

第一步使用 conan pkglist merge 命令合并“Release”和“Debug”配置的包列表，并将其合并到一个单独的 uploaded.json 包列表中。此列表将用于运行提升操作。

在本例中，我们使用了慢速的 conan download + conan upload 提升方式。使用 conan art:promote 扩展命令可以大大提高效率。

运行提升操作后，服务器中将包含以下包

digraph repositories { node [fillcolor="lightskyblue", style=filled, shape=box] rankdir="LR"; subgraph cluster_0 { label="Packages server"; style=filled; color=lightgrey; subgraph cluster_1 { label = "packages\n repository" shape = "box"; style=filled; color=lightblue; "packages" [style=invis]; "ai/1.1.0\n (Release)"; "ai/1.1.0\n (Debug)"; } subgraph cluster_2 { label = "products\n repository" shape = "box"; style=filled; color=lightblue; "products" [style=invis]; "ai/promoted release" [label="ai/1.1.0\n (Release)"]; "ai/promoted debug" [label="ai/1.1.0\n (Debug)"]; } subgraph cluster_3 { rankdir="BT"; shape = "box"; label = "develop repository"; color=lightblue; rankdir="BT"; node [fillcolor="lightskyblue", style=filled, shape=box] "game/1.0" -> "engine/1.0" -> "ai/1.0" -> "mathlib/1.0"; "engine/1.0" -> "graphics/1.0" -> "mathlib/1.0"; "mapviewer/1.0" -> "graphics/1.0"; "game/1.0" [fillcolor="lightgreen"]; "mapviewer/1.0" [fillcolor="lightgreen"]; } { edge[style=invis]; "packages" -> "products" -> "game/1.0" ; rankdir="BT"; } } }

总结

  • 我们构建了 2 个不同的配置，Release 和 Debug（也可以是 Windows/Linux 或其他），并将它们上传到 packages 仓库。

  • 当所有配置的所有包二进制文件都成功构建后，我们将它们从 packages 提升到 products 仓库，以便 products 流水线 可以使用它们。

  • 在包创建过程中捕获了包列表，并将其合并到一个列表中以运行提升操作。

还有一个方面我们尚未考虑，即 ai/1.1.0 的依赖项可能在构建过程中发生变化。请转到下一节，了解如何使用 lockfile 实现更一致的多配置构建。