gpt4 book ai didi

java - 对 Hadoop Map-Reduce 应用程序进行基准测试

转载 作者:可可西里 更新时间:2023-11-01 16:17:29 25 4
gpt4 key购买 nike

我需要按作业执行时间比较两种 Hadoop 调度算法。我可以使用什么来获取所有任务的执行持续时间?

最佳答案

JobTracker 网络用户界面为您提供非常有用的报告,允许比较每个映射器和缩减器的所有内容和可用日志。

同时查看 hadoop-test.jar 存档中的 mrbench 类。网上有很多关于它在 Hadoop 集群基准测试中的用法的信息,例如 this article .

关于java - 对 Hadoop Map-Reduce 应用程序进行基准测试,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/16939831/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com