python - 如何从外部访问Ray远程多节点群集？

Question

我有一个关于光线多节点群集访问的问题:

Considering a deployed cluster on AWS or kubernetes, how can a seperate python process from outside the cluster run tasks on the cluster?

例如Web客户端尝试调用应在远程群集中运行的python任务。

编辑:归结为问题:

Is there a Ray native API to connect to a remote cluster from a computer/server outside of the actual cluster?

Answer 1

https://ray.readthedocs.io/en/latest/deploy-on-kubernetes.html#running-ray-programs说，您可以在ray pod上安装一个shell，然后运行任务或创建一个新的Kubernetes作业。

因此，问题归结为我如何从Web应用程序连接到Kubernetes集群。

您可以使用https://github.com/kubernetes-client中的客户端之一从Web应用程序连接到Kubernetes集群。这是Python的https://github.com/kubernetes-client/python