gpt4 book ai didi

hadoop - 如何更改 hadoop mr 作业中的 reducer 输出文件名?

转载 作者:可可西里 更新时间:2023-11-01 15:09:32 26 4
gpt4 key购买 nike

我有一个 reducer 脚本需要生成一堆 xml 文件。我想使用 reducer 键以编程方式设置文件名。我正在使用 MultipleOutputs 来完成如下操作。

MultipleOutputs mos = new MultipleOutputs(context);
mos.write(new Text(key), new Text(output), key + ".xml");

但输出文件名类似于 key.xml-r-00000。如何从文件名中删除 -r-* 部分,以便它只是 key.xml

最佳答案

这里的-r-0000表示它是从reducer生成的。我们不能更改它,如果你想要自定义文件名,生成这些文件后写一个代码来更改文件名。

关于hadoop - 如何更改 hadoop mr 作业中的 reducer 输出文件名?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/49645927/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com