如何在数据流作业中指定实例类型

Question

我们使用数据流作业来删除数据存储条目。我们正在使用下面提到的命令。

gcloud dataflow jobs run del-data-8 --gcs-location gs://dataflow-templates/latest/Datastore_to_Datastore_Delete --parameters datastoreReadGqlQuery='select * from `ml-data`' --parameters datastoreReadProjectId=xxx --parameters datastoreDeleteProjectId=xxx

我们应该使用什么参数来指定上述数据流作业的实例类型？

Answer 1

您可以使用标志指定实例类型--机器类型。有关您可以选择的机器类型的更多信息，请参阅本文档。

我希望这能有所帮助。

Answer 2

您可以使用workerMachineType来设置它们。请参阅以下文档。

https://cloud.google.com/dataflow/docs/reference/pipeline-options