gpt4 book ai didi

hadoop - 关于健康 cloudera hadoop(网络接口(interface)速度)

转载 作者:行者123 更新时间:2023-12-02 20:46:24 25 4
gpt4 key购买 nike

我是那个领域的新手,我的 hadoop 集群有一些问题。

我修复了许多健康问题,但我的主人的健康仍然“令人担忧”(不幸的是,仍然是黄色而不是“绿色”)。这是否取决于我的主机通过速度为 100 Mbps 的旧交换机连接的事实?几乎所有服务器的网卡都支持 1000 Mbps。
在解决此错误的建议中,建议检查双工选项。如果我的所有主机都在半双工模式下工作,它会“关注健康”,但我已经检查过了,它们都有全双工模式。

网络接口(interface)速度问题屏幕:

Screen of Network Interface speed issue

关于我选择的集群安装选项(如果需要):
1)使用包;
2)CDH5;
3)CDH 5.13.0。

附言主人的“关心健康”对他们的工作有多大影响?我可以对它们运行复杂的任务吗?我刚刚使用了测试 WordCount 并计算了 Pi - 他们成功了。

最佳答案

+1 @cricket_007 的评论。如果您考虑 Reference Architecture for DeployingCDH 5.X ON RED HAT OSP 11作为典型部署,您会看到理想的网络配置是 10 Gb 以太网 (10GbE)。 enter image description here

Cloudera Manager 的大多数警告都是针对生产级集群的。

关于hadoop - 关于健康 cloudera hadoop(网络接口(interface)速度),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/47853818/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com