gpt4 book ai didi

java - 使用Java将一个reducer的输出提供给另一个reducer的示例代码片段示例

转载 作者:行者123 更新时间:2023-12-02 21:36:45 26 4
gpt4 key购买 nike

我是Hadoop和map-reduce程序的新手。如果有人回答我的问题会很有帮助

我想编写一个mapreduce程序,其中有两个reducer。一个 reducer 的输出被提供给另一 reducer 。要有两个reducer,应该有两个job驱动程序,有人可以给我提供任何mapreduce程序的示例代码片段或示例代码,其中一个reducer的输出与job的定义代码一起提供给另一个reducer。

最佳答案

我们可以有两个mapreduce工作。可以将第一个作业的输出作为第二个作业的输入。第二个作业的映射器可以只是一个标识映射器,它以输入作为输出,我们可以为第二个作业的reducer提供逻辑。使用JobControl可以使这两个作业一个接一个地运行。

关于java - 使用Java将一个reducer的输出提供给另一个reducer的示例代码片段示例,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31669621/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com