gpt4 book ai didi

hadoop - 有关hadoop联合的同步问题

转载 作者:行者123 更新时间:2023-12-02 21:40:57 24 4
gpt4 key购买 nike

我对hadoop联盟有一些疑问。
据我所知,它同时运行多个master(namenode)。

所以我的问题是,如果一个客户有一个请求,那么如何确定哪个主服务于该客户的请求。

另一个问题是每个主数据库中存储的元数据是否相互并发。

如果主服务器中的数据是并发的,而两个客户端同时在两个不同的主服务器上有请求,则如何处理同步问题。

希望我能澄清我的问题。
我只在apache hadoop上阅读网络。任何 Material 和教程都非常感谢。
并非常感谢您的评论和更正。

最佳答案

使用客户端安装表,我们可以将文件路径映射到namenodes(下面的core-site.xml配置)

  <property>
<name>fs.viewfs.mounttable.default.link./namenode1</name>
<value>hdfs://namenode1:9001/home</value>
</property>
<property>
<name>fs.viewfs.mounttable.default.link./namenode2</name>
<value>hdfs://namenode2:9001/home</value>
</property>}

在放置操作期间的示例,我们可以指定路径,请求将转到namenode1
bin/hadoop fs -put file.txt /namenode1/input

在HDFS Federation中,每个名称节点管理自己的元数据。

关于hadoop - 有关hadoop联合的同步问题,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/28754200/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com