gpt4 book ai didi

hadoop - 为什么 hadoop mapper 任务的持续时间总是 3 秒的倍数?

转载 作者:可可西里 更新时间:2023-11-01 16:56:39 25 4
gpt4 key购买 nike

查看我的任务日志,我注意到所有映射器任务都在 3 秒的倍数后完成:

enter image description here

当我查看一些运行时间较长的作业的日志时,看到了同样的事情:

这背后的原因是什么?

最佳答案

因为在旧版本的 Hadoop 中,Task.PROGRESS_INTERVAL 被硬编码为 3000 毫秒

关于hadoop - 为什么 hadoop mapper 任务的持续时间总是 3 秒的倍数?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/29040170/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com