gpt4 book ai didi

hadoop - hadoop及其技术设置

转载 作者:行者123 更新时间:2023-12-02 20:20:58 26 4
gpt4 key购买 nike

对于研究项目的要求,我选择以下技术,因为数据源是SQL SERVER

初始数据大小为100Gb,季度增长10

信息

Hadoop –多节点群集(1个名称节点+ 3个数据节点)
Hadoop 3.1.2,
Apache Maven 3.6.0
Ubuntu 18.04
安巴里

上面的设置现已准备就绪,剩余项目如下

数量:1.4.7
配置单元:2.3.5
Oozie 5.0.0

是否应将它们全部安装在单独的计算机上?
开发完成后的部署策略是什么?

最佳答案

如果您有可用的硬件,则可以,每个主服务都应位于单独的计算机上,以实现容错目的。

意思是,Oozie服务器,Hive服务器,Hive Metastore都是独立的。

Sqoop和Hive客户端只是客户端,可以在任何NodeManager上

关于hadoop - hadoop及其技术设置,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/60526469/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com