gpt4 book ai didi

python - 分布式 tensorflow : ps/workers hosts on aws ?

转载 作者:行者123 更新时间:2023-11-28 17:10:36 26 4
gpt4 key购买 nike

我在使用 gpus 的 aws 上使用分布式 Tensorflow。当我在本地机器上训练模型时,我将 ps_host/workers_host 指示为类似于“localhost:2225”的内容。在 aws 的情况下我需要使用什么 ps/workers 主机?

最佳答案

这是一个很好的 github 项目,展示了如何在 AWS 上将分布式 TensorFlow 与 Kubernetes 或新的 AWS SageMaker 结合使用:https://github.com/pipelineai/pipeline

至少,您应该使用 TensorFlow Estimator API。分布式 TensorFlow 有很多隐藏的、没有很好记录的技巧。

一些更好的例子在这里:https://github.com/GoogleCloudPlatform/cloudml-samples/tree/master/census

关于python - 分布式 tensorflow : ps/workers hosts on aws ?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/47804792/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com