gpt4 book ai didi

hadoop - Hadoop在多节点上的融合

转载 作者:行者123 更新时间:2023-12-02 20:06:27 25 4
gpt4 key购买 nike

我需要使用hadoop fuse 将HDFS安装在多节点群集上。我该如何实现?
我已经在单节点群集上成功部署了 fuse ,但是我怀疑它是否可以在多节点上运行。任何人都可以对此轻描淡写吗?

最佳答案

集群是单节点还是多节点都没有关系。如果要在远程计算机上安装HDFS,请确保该特定计算机可以访问群集网络。在您计划使用FUSE挂载HDFS的节点中设置一个hadoop客户端(群集中具有相同的hadoop版本)。

挂载时的区别是namenode url。
( dfs:// NAMENODEHOST:NN-IPC-PORT / )

在单节点名称的情况下,node url将是localhost(0.0.0.0/127.0.0.1/0),但是在多节点群集中,您必须提供namenode主机名/ Ip地址而不是localhost。可以在任何可以访问hadoop集群的linux机器上挂载hdfs。

Trying to use Fuse to mount HDFS. Can't compile libhdfs

关于hadoop - Hadoop在多节点上的融合,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/22478018/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com