amazon-web-services - 如何绕过 HTTP 请求有效负载的 AWS ElasticSearch 大小

Question

我有一个带有 10MB Maximum Size of HTTP Request Payload 的 AWS ES 实例，并且我有一些需要添加超过 10MB 大小的记录，所以我想要一种方法，一旦它已经在 ES 索引中创建，我可以继续填充一个字段，这样我就可以在它之后继续推送数据已创建(如更新字段)。

我正在为创作做这样的事情:

curl -XPUT 'https://myinstance.amazonaws.com/index_name/doc_type/<item.id>?pretty' -H 'Content-Type: application/json' -d'
{
    "title": <title>,
    "description": <description with more than 10MB>,
    "date": <mydate>,
    "extra_id": <extra_id>,
}
'

这可能吗？也许继续包含字段，或者更新一个向它推送更多数据的字段。

Answer 1

如果它是一次性数据加载事件，则暂时将您的实例扩展到 m3.xlarge.elasticsearch能够发送超过 10 MB 的有效负载请求。一旦您的数据全部加载完毕，然后缩减为原始实例类型。

或者，如果您需要定期发送大于 10 MB 的负载请求，则将实例大小缩放到 m3.xlarge.elasticsearch永久。

或拆分您的数据，使每个请求小于 10 MB。