gpt4 book ai didi

hadoop - 如何将数组输入到Map Reduce作业?

转载 作者:行者123 更新时间:2023-12-02 20:09:06 24 4
gpt4 key购买 nike

我有一个不断检索某些数据的服务。我正在将这些数据转储到数组中,必须进一步处理这些数据。是否可以创建一个动态数组,使其不断被serivice更新,并且我可以并行执行Map Reduce作业?
另外,我如何使用什么类来简单地接受数组输入(而不是文件)?
PS我是Hadoop / Map Reduce的新手
我在用Java编写代码。

最佳答案

Hadoop用于批处理,因此仅当您存储了文件之类的数据并且需要对其进行处理且作业完成时,它才具有强大的功能。您可能会看看Storm。我认为它会更适合您的用例。

关于hadoop - 如何将数组输入到Map Reduce作业?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19020844/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com