elasticsearch - 索引敏感数据

Question

我们需要能够搜索很多个人身份信息。我们本来打算为此使用ElasticSearch，但是在存储原始文档方面存在问题。

有没有一种方法可以在字段上建立索引，但不能存储该字段？在这种情况下，如果我们在记录上遇到问题，我们将在dynamoDB中获取包含原始文档的记录的GUID(或更可能是加密的GUID)。但是，如果有人设法捏住ES数据库，他们将无法轻松地重建原始信息。

谢谢，

亚当。

Answer 1

刚刚找到答案:https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-source-field.html

您可以禁用存储原始源文档，仅具有索引-正是我想要的。我们将原始文档存储在Amazon的DyanmoDB中-当然是加密的。 ES索引将使我们能够执行所需的搜索，而无需存储原始文档。

ES文档的工作人员会认真考虑这种方法，例如，如果我们需要重新索引，则必须将所有内容从Dynamo中取出，然后再次通过ES进行输入。

附带说明一下，我们最近去过AWS峰会，他们鼓励我们将Kinesis视为索引文档并将其存储在DynamoDB中的管道。

亚当