gpt4 book ai didi

hadoop - 映射后的多个(独立)reduce 函数

转载 作者:可可西里 更新时间:2023-11-01 15:38:11 26 4
gpt4 key购买 nike

我的 map 函数为相同的数据发出两种不同的键值对。当然,我需要 2 个独立的 reduce 函数来处理这个问题。可能吗?

比如,我可以在 map 的末尾有多个 output.collect() 语句,并附加一个指定 reducer 的参数吗?我试着查找它,但找不到任何东西。

最佳答案

您应该考虑使用 MultipleOutputs类(class)。它有漂亮且不言自明的文档。

关于hadoop - 映射后的多个(独立)reduce 函数,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/22093673/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com