gpt4 book ai didi

hadoop - apache storm 是否允许处理存储在 HDFS 上的大量文件?

转载 作者:可可西里 更新时间:2023-11-01 16:35:29 27 4
gpt4 key购买 nike

apache storm 是否允许处理存储在 HDFS 上的大量文件?

知道我的目标是获得实时响应(秒或毫秒),

或者apache storm只专用于流处理!!

谢谢

最佳答案

Storm 仅用于流式处理(与批处理相反),但如果我对您的理解正确,您想从 HDFS 读取文件并进行处理吗?

storm-hdfs 模块有一个 spout(拓扑数据源)。它可能会做你想做的事。

https://github.com/apache/storm/tree/master/external/storm-hdfs#hdfs-spout

关于hadoop - apache storm 是否允许处理存储在 HDFS 上的大量文件?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/54087668/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com