java - 使用 Oozie 通过 Hive/Hadoop 安排临时查询

Question

Oozie 是否支持用户通过 REST API 安排临时 Hive 查询？

我们正在构建一个用户可以在 Hadoop 中搜索文档的系统，支持用户(可选)指定要搜索的数据的某些属性，使用 Hive 对 Hadoop 执行查询。由于对可选字段的这种支持，我们无法提前知道 Hive 查询会是什么样子(就 Hive 查询中将使用哪些表而言)。我们有一项服务，在运行时，我们处理用户的查询以生成相应的 Hive 查询。

我们希望能够通过 Oozie 安排这些查询，但我无法找到有关如何通过 Oozie 执行此操作的文档。我认为这是可能的。是否有可用的示例 Java 代码来描述如何执行此操作？

Answer 1

使用 Oozie 协调器安排作业，Apache 文档 here和一个例子 here对于 Oozie 协调器。另外，请查看 Azkaban(1、2)进行调度。