azure - Azure HDInsight 上的 webHDFS URL 是什么？

Question

这里是 azure 的新手。我刚刚在常规存储帐户上使用新的存储实例启动了一个新的 HDInsight 实例。我想知道我的 webHDFS url 是什么/在哪里可以检索它以及如何访问它。

我没有使用 Azure Data Lake 存储。 (几乎我发现的每个与 azure 相关的链接都会指向一些数据湖链接)

我的 hdfs-site.xml:

<property>
  <name>dfs.webhdfs.enabled</name>
  <value>true</value>
</property>

核心站点.xml:

<property>
  <name>fs.defaultFS</name>
  <value>wasb://<my hdinsight storage name>@<my hdinsight name>.blob.core.windows.net</value>
  <final>true</final>
</property>

Answer 1

您的基本 webHDFS 文件系统 URI 应为:webhdfs://<HOST>:<HTTP_PORT>你的主机应该是 CLUSTERNAME.azurehdinsight.net HTTP_PORT 默认为 80。

对应的HTTP URL格式如下

http://<HOST>:<HTTP_PORT>/webhdfs/v1/