hdfs - 用于访问HDFS中文件的URI

Question

我使用Ambari设置了一个群集，该群集包含3个节点。

现在，我想使用客户端应用程序访问HDFS中的文件。

我可以在Amabari的“数据节点”下找到所有节点URI。

我访问文件需要使用的URI +端口是什么？我已经使用了默认的安装过程。

Answer 1

默认端口为“8020”。

您可以通过3种不同的方式访问“hdfs”路径。

只需使用“/”作为根路径

例如

E:\HadoopTests\target>hadoop fs -ls /
Found 6 items
drwxrwxrwt   - hadoop  hdfs          0 2015-08-17 18:43 /app-logs
drwxr-xr-x   - mballur hdfs          0 2015-11-24 15:36 /tmp
drwxrwxr-x   - mballur hdfs          0 2015-10-20 15:27 /user

使用“hdfs:///”

例如

E:\HadoopTests\target>hadoop fs -ls hdfs:///
Found 6 items
drwxrwxrwt   - hadoop  hdfs          0 2015-08-17 18:43 hdfs:///app-logs
drwxr-xr-x   - mballur hdfs          0 2015-11-24 15:36 hdfs:///tmp
drwxrwxr-x   - mballur hdfs          0 2015-10-20 15:27 hdfs:///user

使用“hdfs://{NameNodeHost}:8020/”

例如

E:\HadoopTests\target>hadoop fs -ls hdfs://MBALLUR:8020/
Found 6 items
drwxrwxrwt   - hadoop  hdfs          0 2015-08-17 18:43 hdfs://MBALLUR:8020/app-logs
drwxr-xr-x   - mballur hdfs          0 2015-11-24 15:36 hdfs://MBALLUR:8020/tmp
drwxrwxr-x   - mballur hdfs          0 2015-10-20 15:27 hdfs://MBALLUR:8020/user

在这种情况下，“MBALLUR”是我的名称节点主机的名称。