gpt4 book ai didi

hive - 我可以将 Cloud Dataproc 与外部 Hive Metastore 一起使用吗?

转载 作者:行者123 更新时间:2023-12-02 00:47:38 25 4
gpt4 key购买 nike

默认情况下,Cloud Dataproc在 Dataproc 集群本地运行 Hive Metastore。这表示:

  • Metastore 在集群中是短暂的
  • 使用单个元存储拥有多个集群可能会很痛苦

  • 是否可以将 Dataproc 集群指向单个 Hive 元存储?是否也可以让 Metastore 位于集群外部,因此不需要为 Metastore 运行集群?

    最佳答案

    是的,这是可能的——集群可以使用在 Cloud SQL 上运行的通用元存储。 .

    Cloud Dataproc 集群可以使用此 Cloud SQL Proxy连接到外部 SQL 元存储。在使用此解决方案之前,您应该查看 important notes .

    关于hive - 我可以将 Cloud Dataproc 与外部 Hive Metastore 一起使用吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/60494168/

    25 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com