gpt4 book ai didi

hadoop - Ganglia或X-trace用于Hadoop监控

转载 作者:行者123 更新时间:2023-12-02 20:11:47 24 4
gpt4 key购买 nike

我试图捕获hadoop任务(映射器和reducer)的磁盘I / O和网络I / O,即即时带宽,累积流量,源地址和目标地址。我发现了两个流行的Hadoop监视工具:Ganglia(通常与Nagios结合使用)和X-Trace。 Ganglia由UC Berkeley于2004年提出,X-Trace也是由UC Berkeley于2007年开发的。

对于这两个工具的优缺点的任何建议都值得赞赏。

最佳答案

我将开始使用神经节或Munin,它们会告诉您群集中不同计算机上的资源利用率。

X-trace是一个相当学术的项目,它生成有关分布式事务,延迟和瓶颈以及分布式系统中控制流的数据。不幸的是,目前还没有很好的支持。

关于hadoop - Ganglia或X-trace用于Hadoop监控,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/14176466/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com