gpt4 book ai didi

Hadoop WordCount 示例 - 实现排序

转载 作者:可可西里 更新时间:2023-11-01 16:21:19 26 4
gpt4 key购买 nike

我是 Hadoop 新手。我已经能够成功运行 WordCount 示例。

我想修改此示例,以便我的输出按计数的升序排序。我无法弄清楚我需要在哪里进行必要的更改。

如果有人能给我一些实现排序的指导,那就太好了?

最佳答案

参见 org.apache.hadoop.examples.Sort

这不是使用 map/reduce 做的 super 简单。它涉及获取数据的直方图并使用 TotalOrderPartitioner

或者,您可以使用具有内置排序功能的 Hive 或 Pig。

关于Hadoop WordCount 示例 - 实现排序,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/3998847/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com