apache-spark - 是否有适合多节点集群部署的 Apache Spark 2.0.0 公共(public) Docker 镜像？

Question

关闭。这个问题不符合Stack Overflow guidelines .它目前不接受答案。












想改进这个问题？将问题更新为 on-topic对于堆栈溢出。

5年前关闭。




Improve this question




正在寻找 Apache Spark 2.0.0 Docker 镜像，可以从任何公共(public)存储库中提取，支持集群。

Answer 1

目前没有这样的形象。在 Docker 中运行 Spark 很棘手，因为它的网络行为:

它打开了很多端口，其中一些是动态决定的(用于 TorrentBroadcast)。

它希望公布其主机名，以便能够接收来自执行程序的传入连接。

我找不到现成的图像，我放弃了解决上述问题。我使用 在 Docker 中运行我的 Spark 应用程序的解决方法。主机网络 .