gpt4 book ai didi

google-cloud-dataproc - 在 dataproc 工作流程中设置自动区域放置

转载 作者:行者123 更新时间:2023-12-03 22:37:23 33 4
gpt4 key购买 nike

我正在尝试在 Dataproc 工作流模板中设置自动区域放置

我正在尝试在 Dataproc 工作流模板中设置自动区域放置,就像在 create a cluster 时所做的一样没有模板工作流

谷歌云 SDK 244.0.0从 docker 镜像开始:

docker run -ti google/cloud-sdk:slim bash 

使用服务帐户在谷歌云中注册

gcloud auth activate-service-account --key-file=$GOOGLE_SDK_CREDENTIALS

gcloud config set project $PROJECT

gcloud compute project-info add-metadata \
--metadata google-compute-default-region=$REGION

创建模板

gcloud dataproc workflow-templates create $TEMPLATE_NAME --project=$PROJECT --region=$REGION

gcloud dataproc workflow-templates set-managed-cluster $TEMPLATE_NAME \
--cluster-name $CLUSTER_NAME \
--project=$PROJECT \
--region=$REGION

不是自动选择一个区域,而是要求我选择一个区域:

For the following cluster:
- [mycluster]
choose a zone:
[1] asia-east1-a
[2] asia-east1-b
[3] asia-east1-c
[4] asia-east2-a
[5] asia-east2-b
[6] asia-east2-c
[7] asia-northeast1-a
...
[48] us-central1-c
[49] us-central1-f
[50] us-east1-b
Did not print [11] options.
Too many options [61]. Enter "list" at prompt to print choices fully.
Please enter your numeric choice:

是否有另一种方法可以使用 dataproc 模板工作流来使用 Auto Zone

最佳答案

在文档中,它说:

... To create a Cloud Dataproc cluster that uses Auto Zone placement, use the gcloud dataproc clusters create command. Set the --region flag to a non-global region, and omit the --zone flag (or leave the flag empty: --zone= or zone="").

Note: If you ran the gcloud config set compute/zone command to set a default zone, you must supply the --zone= or zone="" flag to gcloud dataproc clusters create in order to enable the Auto Zone feature. Power Shell users must surround the empty quotes with single quotes: --zone='""'. ..."

但它不适用于模板工作流程。如果我设置区域并省略区域,则稍后请求区域。如果我设置区域并添加 --zone=""或 --zone=,无论如何都要请求区域。

关于google-cloud-dataproc - 在 dataproc 工作流程中设置自动区域放置,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/56008169/

33 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com