什么代表了云构建中的STEP



实际上我正在开发一个管道,在那里之前一切都很好,因为它已经工作了。但当我想解释时,我并不清楚每一步在物理上代表什么,例如一步";可以";是集群中的一个节点。如果有人对此有明确的解释,请向我们解释。

  • 步骤示例1

文件配置云构建:

steps:
- name: "gcr.io/google.com/cloudsdktool/cloud-sdk"
args: ["bin/deploy-dags-composer.sh"]
env:
- 'COMPOSER_BUCKET=${_COMPOSER_BUCKET}'
- 'ARTIFACTS_BUCKET=${_ARTIFACTS_BUCKET}'
id: 'DEPLOY-DAGS-PLUGINS-DEPENDS-STEP'

Bash文件

#! /bin/bash
gsutil cp bin/plugins/* gs://$COMPOSER_BUCKET/plugins/
gsutil cp bin/dependencies/* gs://$ARTIFACTS_BUCKET/dags/dependencies/
gsutil cp bin/dags/* gs://$COMPOSER_BUCKET/dags/
gsutil cp bin/sql-scripts/* gs://$ARTIFACTS_BUCKET/path/bin/sql-scripts/composer/
  • 示例2几个步骤

文件配置云构建

steps:
- name: gcr.io/cloud-builders/gsutil
args: ['cp', '*', 'gs://${_COMPOSER_BUCKET}/plugins/']
dir: 'bin/plugins/'
id: 'deploy-plugins-step'
- name: gcr.io/cloud-builders/gsutil
args: ['cp', '*', 'gs://${_ARTIFACTS_BUCKET}/dags/dependencies/']
dir: 'bin/dependencies/'
id: 'deploy-dependencies-step'
- name: gcr.io/cloud-builders/gsutil
args: ['cp', '*', 'gs://${_COMPOSER_BUCKET}/dags/']
dir: 'bin/dags/'
id: 'deploy-dags-step'
- name: gcr.io/cloud-builders/gsutil
args: ['cp', '*', 'gs://${_ARTIFACTS_BUCKET}/projects/path/bin/sql-scripts/composer/']
dir: 'bin/sql-scripts/'
id: 'deploy-scripts-step'

在Cloud Build中,步骤是处理的一个阶段。这个阶段由一个要加载的容器来描述,该容器包含在该阶段中执行处理所需的二进制文件。

对于这个容器,您可以定义一个入口点,在容器中运行的二进制文件,以及传递给它的参数

你也有几个选项,你可以在这里看到。

需要理解的一个重要概念是,从一个步骤到另一个步骤只保留/workspace目录。在每个步骤结束时,容器都被卸载,并且您丢失了内存中的所有数据(如环境变量(和存储在/workspace目录之外的数据(如系统依赖项安装(。请记住,许多问题都来自于此。


编辑1:

在一个步骤中,您可以开箱即用地在一个容器上运行1个命令。gsutil,gcloud,mvn,node,。。。。这一切都取决于您的容器和入口点。

但是,当您需要在同一个容器上运行多个命令时,还有一个有用的高级功能。发生这种情况的原因有很多。你可以这样做

- name: 'gcr.io/cloud-builders/gcloud'
entrypoint: 'bash'
args:
- -c
- |
MY_ENV_VAR=$(curl -H "Metadata-Flavor: Google" http://metadata.google.internal/computeMetadata/v1/instance)
echo $${MY_ENV_VAR} > env-var-save.file
# Continue the commands that you need/want ....

最新更新