gpt4 book ai didi

hadoop - 在 docker 容器上运行 hadoop 集群

转载 作者:IT老高 更新时间:2023-10-28 21:22:44 24 4
gpt4 key购买 nike

我想运行一个多节点 hadoop 集群,每个节点都位于不同主机上的 docker 容器中。这张图片 - https://github.com/sequenceiq/hadoop-docker在伪分布式模式下启动 hadoop 效果很好,修改它以使每个节点在单独的 ec2 主机上的不同容器中的最简单方法是什么?

最佳答案

我用两个容器在两个不同的 ubuntu 主机上运行主节点和从节点来做到这一点。我使用 weave 在容器之间建立了网络。我已在 docker hub 帐户 div4 上添加了容器的图像。我以相同的方式安装了 hadoop,因为它安装在不同的主机上。我在这里添加了两个带有 coomands 的图像以在它们上运行 haddop:

https://registry.hub.docker.com/u/div4/hadoop_master/ https://registry.hub.docker.com/u/div4/hadoop_slave/ .

关于hadoop - 在 docker 容器上运行 hadoop 集群,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/27008522/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com