gpt4 book ai didi

python - 用于部署单节点的 Storm 替代方案

转载 作者:太空宇宙 更新时间:2023-11-03 17:21:37 25 4
gpt4 key购买 nike

我正在创建一个应用程序,并希望它可以使用 Storm 进行扩展。问题是,大多数用户实际上会在单个节点上运行它。

我认为那些用户必须在单个节点中安装 Storm 才能使用该应用程序是不公平的。有没有办法让应用程序只需要在多台机器上运行时才需要 Storm,而无需重写部分应用程序?也许是一个图书馆?

我知道我总是可以编写部分特定于 Storm 环境中运行的代码并让用户决定,但我正在寻找一种更优雅的方法。如果不存在解决方案,我正在考虑编写一个“代理库”,它可以决定以 Storm 方式还是在单个节点中使用 Bolt。

我正在使用 Python,但如果解决方案需要,我可以使用其他语言。

最佳答案

嗯...你的问题有点遗传性,很难回答。我个人会选择 Storm,因为:

  1. 它使代码更加简单。
  2. 安装 Storm 并不难。
  3. 对于非并行执行,您可以使用 Storm LocalCluster,它在单个 JVM 上执行 Storm 程序,因此不需要设置集群。但是,请注意 LocalCluster 是为测试代码而设计的,而不是在生产中使用(如果我没记错的话——也许您应该仔细检查其他来源进行验证)。不确定它的长期运行有多稳定(当然,没有容错能力——但是,如果您实现自己的本地应用程序或“代理库”,您可能也没有容错能力)。

编写一个“代理库”并不是一个坏主意。但不要低估这种方法的复杂性!以完全兼容的方式构建它将会变得相当困难..

关于python - 用于部署单节点的 Storm 替代方案,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/33087364/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com