hadoop - Elasticsearch 和 Hive 协同工作

Question

我看到 Hive 和 Elasticsearch 几乎等同，只是 Elasticsearch 支持近乎实时的查询。此外，Elasticsearch 可以独立运行来存储和分析数据。那么为什么人们在 Hadoop 上同时使用 Hive 和 Elasticsearch？

Answer 1

Hive 和 Elasticsearch 是两种截然不同的工具。

Hive 是一个 SQL 到 Hadoop Java 的翻译器，它使用 SerDe 与几乎任何使用 SQL(包括 Elasticsearch )的数据源进行交互。 Hive 还可以使用 HDFS 存储数据。 Hive 非常擅长批处理。

Elasticsearch 是一个分布式的分面搜索引擎，非常适合快速检索数百万文档中的数据。它还可以用于使用分面进行一些简单的计算。

Hive 和 ES 是互补的，人们使用 Hive 来处理数据，使用 ES 来传递数据/见解。