gpt4 book ai didi

hadoop - 具有远程部署的Hadoop键值存储

转载 作者:行者123 更新时间:2023-12-02 20:46:33 25 4
gpt4 key购买 nike

我的应用程序是通过使用Kerberos keytab和主体通过yarn-cluster模式下的spark-submit通过spark-submit远程启动的,它由以下指南提供:https://spark.apache.org/docs/latest/running-on-yarn.html。这种方法的优点是,我在任何群集上都有自己的spark版本。

是否可以仅通过运行具有HADOOP_CONF_DIR / YARN_CONF_DIR配置的bash脚本来自动部署具有随机访问权限的Ignite / Hazelcast / Accumulo / Kudu或其他NoSQL DB,而无需对sftp / ssh的Hadoop YARN集群进行读写访问就可以进行随机访问?

最佳答案

在YARN集群上部署Hazelcast是可能且容易的,请看https://github.com/hazelcast/hazelcast-yarn

关于hadoop - 具有远程部署的Hadoop键值存储,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/47795550/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com