elasticsearch - Elasticsearch每日滚动索引包含重复的_id

Question

这可能是一个愚蠢的问题，但我使用的是每日滚动索引以Logstash保存事件，因此配置很简单:

input: {..source..}
filter: {..filter..}
output: {
 elasticsearch: {
   document_id: %{my_own_guarantee_unique_id}
   index: myindex-%{+YYYY.MM.DD}
 }
}

我发现的是，如果有不同日期的 my_own_guarantee_unique_id相同的事件出现在不同的日期，它将在这些每日滚动索引中多次创建。您会发现myindex-2015.06.21和myindex-2015.06.22中出现_id = 123的事件

是这样的重复开箱吗？我应该怎么做才能避免这种情况？任何建议或阅读将不胜感激，谢谢!

Answer 1

由于您使用多个索引，每天使用一个，因此您可以获得相同的_id。使文档与众不同的是uid，它是index，type和id的组合。 flex 地改变我的知识是不可能的。