gpt4 book ai didi

solr - AWS EC2 实例上的 Zookeeper 和 SolrCloud

转载 作者:行者123 更新时间:2023-12-04 19:03:12 26 4
gpt4 key购买 nike

我已经使用 Solr 一段时间了,但我是 SolrCloud 的新手。我正在调查在我的上下文中部署 SolrCloud 或在 ELB 后面放置多个 Solr 实例(具有匹配的索引内容)是否有意义。

我的部署将在 EC2 实例上的 AWS 中进行。我们目前在 AWS 中的故障排除策略是终止行为不端的实例,并允许它们由 AutoScaling 组自动重新创建(该组在创建新实例时通过脚本配置新实例)。事实上,一旦实例投入生产,我们就无权登录实例。 Solr 中存储的所有内容都可以重新索引,因此无需担心数据丢失。

然而,在尝试了解 SolrCloud 基础设施时,我有几个问题:

  • 如果我销毁其中一个实例,Zookeeper 是否能够自动添加一个新实例?我所看到的一切似乎在配置中都有静态 IP 地址,如果实例被终止和替换,则需要更新配置(并重新启动 Zookeeper)。
  • 是否有我应该调用的“主”Zookeeper 实例,或者我可以调用其中的任何一个实例?如果我可以调用其中任何一个,我们可能会在 Zookeeper 前面放置一个 ELB。
  • 如果我们遇到大量使用并允许 AWS AutoScaling 组创建额外的服务器作为 SolrCloud 分片,SolrCloud 会优雅地添加实例并终止它们而不会出现问题吗? (这似乎是真的,也是使用 SolrCloud 的全部意义。)
  • 最佳答案

  • 如果我销毁其中一个实例,Zookeeper 是否能够自动添加一个新实例?我所看到的一切似乎在配置中都有静态 IP 地址,如果实例被终止和替换,则需要更新配置(并重新启动 Zookeeper)。

  • AN:在 ZooKeeper 中,您只需要提及其他 ZooKeeper。这是为了让 ZooKeeper 知道其他正在运行的 ZooKeeper。除非您计划增加/减少 ZooKeeper 的数量,否则您不需要更改此配置。即使我们必须做,我们也可以通过一次做一个来在不打扰集群的情况下完成。此外,我们将主机名保留在配置中,以便 ip 的更改不会对此产生影响。
  • 是否有我应该调用的“主”Zookeeper 实例,或者我可以调用其中的任何一个实例?如果我可以调用其中任何一个,我们可能会在 Zookeeper 前面放置一个 ELB。

  • AN:在 ZooKeeper 中,我们有领导者和追随者。我们不需要理会它们,因为我们不与 ZooKeepers 通信
  • 如果我们遇到大量使用并允许 AWS AutoScaling 组创建额外的服务器作为 SolrCloud 分片,SolrCloud 会优雅地添加实例并终止它们而不会出现问题吗? (这似乎是真的,也是使用 SolrCloud 的全部意义。)

  • AN:当你创建一个新的SOLR节点时,你必须在同一个集群下启动该节点(通过相同的ZooKeepers)。一旦开始,您将不得不拆分一个分片并将其移动到另一个节点以平衡集群。目前还没有自动化。

    SOLR 节点是您必须添加到 ELB 中的节点。

    当您启动 SOLR 节点时,您将提及 ZooKeeper 列表,SOLR 节点将通过该列表了解哪个集群是该集群的一部分以及其他节点为该集群提供服务

    关于solr - AWS EC2 实例上的 Zookeeper 和 SolrCloud,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31813350/

    26 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com