gpt4 book ai didi

hadoop - 什么是无状态节点? Hadoop 节点如何是无状态的?

转载 作者:可可西里 更新时间:2023-11-01 16:29:26 26 4
gpt4 key购买 nike

无状态节点是否意味着彼此独立?你能用 hadoop 解释一下这个概念吗

最佳答案

解释如下:每个映射器/缩减器都不知道所有其他映射器/缩减器(即关于它们的当前状态、它们的特定输出(如果有的话)等)。这种无状态对于某些数据处理工作负载(例如图形数据)来说不是很好,但可以轻松并行化(特定的 map/reduce 任务可以在任何节点上运行,这意味着失败的 mapper/reducer 不是问题,只需在相同的输入拆分/映射器的输出)。

关于hadoop - 什么是无状态节点? Hadoop 节点如何是无状态的?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42066113/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com