elasticsearch - ElasticSearch 中理想的批量大小公式是什么？

Question

我相信 ElasticSearch 中应该有一个计算批量索引大小的公式。大概如下是这样一个公式的变量。

• 节点数
• 分片数/索引
• 文档大小
• 内存
• 磁盘写入速度
• 局域网速度

我想知道是否有人知道或使用数学公式。如果不是，人们如何决定他们的体积大小？通过反复试验？

Answer 1

仔细阅读 ES 批量API文档:https://www.elastic.co/guide/en/elasticsearch/guide/current/indexing-performance.html#_using_and_sizing_bulk_requests

• 尝试使用 1 KiB，尝试使用 20 KiB，然后使用 10 KiB，...二分法
• 使用以 KiB(或等效)为单位的批量大小，而不是文档计数!
• 批量发送数据(无流式传输)，如果可以，传递冗余信息 API url
• 如果可能，删除数据中多余的空格
• 禁用搜索索引更新，稍后将其激活
• 在所有数据节点之间循环