gpt4 book ai didi

hadoop - 我是否必须安装 Hadoop 才能使用 Elasticsearch ES-Hadoop 连接器

转载 作者:行者123 更新时间:2023-12-02 22:06:52 25 4
gpt4 key购买 nike

这个问题在这里已经有了答案:





Hadoop's HDFS with Spark

(1 个回答)


6年前关闭。




我有 Elasticsaerch集群并想使用 Apache Spark在其上运行计算。 The ES-Hadoop connector包含 Spark可以在 Elasticsearch 上运行计算的库.我必须先安装 Hadoop 还是我可以输入 elasticsearch-spark_2.10-2.2.0-rc1.jar在 Spark 类路径中作为文档提到以使其工作?

最佳答案

如果您想将 ElasticSearch 与 Spark 一起使用,那么我建议您使用 Elasticsearch 的 Spark Native Support。

它更易于使用,您可以直接将数据作为 Spark RDD 加载/保存到 Elastic 搜索中。更多详情请引用:Elasticsearch Apache Spark support

关于hadoop - 我是否必须安装 Hadoop 才能使用 Elasticsearch ES-Hadoop 连接器,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/35902651/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com