gpt4 book ai didi

java - MapReduce 从 Redis 读取输入

转载 作者:IT王子 更新时间:2023-10-29 06:04:42 29 4
gpt4 key购买 nike

我想编写一个 Java 程序来执行 MapReduce 作业(例如字数统计)。输入来自Redis。我如何编写 Map 类以从 Redis 中一个一个地检索并在 Map 类中执行一些过程,就像我之前从 HDFS 读取一样?

最佳答案

没有允许我们这样做的 OOTB 功能。但您可能会发现类似 Jedis 的内容有帮助。 Jedis 是一个 Java 客户端,您可以使用它从 Redis 读取/写入数据。参见 this举个例子。

如果您与 Java 的耦合度不高,您可能还会发现 R3有用。 R3 是一个使用 Redis 后端用 python 编写的 map reduce 引擎。

HTH

关于java - MapReduce 从 Redis 读取输入,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/17933614/

29 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com