gpt4 book ai didi

hadoop - reducer 可以写入两个不同的文件吗?

转载 作者:可可西里 更新时间:2023-11-01 16:23:57 26 4
gpt4 key购买 nike

在 map-reduce 中,在 reducer 中发出结果会写入一个名称类似于“output-00000”的输出文件。如果我想在 reducer 中输出到两个不同的文件(显然有 2 个不同的名称)怎么办?如果可能,我如何更改输出文件的默认名称?

最佳答案

使用MultipleTextOutputFormat . MultipleOutputFormat 允许将输出数据写入不同的输出文件。 MultipleOutputFormat 的两个变体是 MultipleSequenceFileOutputFormatMultipleTextOutputFormat

显示了一个简单的例子here.

关于hadoop - reducer 可以写入两个不同的文件吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/18902225/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com