gpt4 book ai didi

GCE 上的 Hadoop 实例

转载 作者:可可西里 更新时间:2023-11-01 15:15:39 28 4
gpt4 key购买 nike

我正在 Google Compute Engine 上设置 Hadoop 集群。但是我无法理解集群实例的工作方式。我已经搜索了很多,但没有一个给出明确的答案。

在设置 Hadoop 集群时,您是否创建一个安装了 Hadoop 的实例的镜像,并且每次启动该实例(镜像)时都创建其他实例(节点)?

但是这种方法需要在每次创建节点时都必须配置节点吗?

有没有人对此有经验并可以提供一些关于在 Google Compute Engine 上设置 Hadoop 集群的部分文档?

最佳答案

有关在 Google Cloud Platform 上运行 Hadoop 的最新信息可以在这里找到: https://developers.google.com/hadoop/

在那里您可以找到 Hadoop 设置脚本,这些脚本允许您根据指定的配置详细信息快速启动 Hadoop 集群。设置脚本包括使用 Hadoop 分布式文件系统 (HDFS) 作为默认文件系统或 Google Cloud Storage 的选项 - 它提供额外的功能,例如自动容量扩展和在 Hadoop 集群的生命周期之外保留数据。

关于GCE 上的 Hadoop 实例,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/23337546/

28 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com