hadoop - 你如何检查dfs中的目录

Question

我在dfs中新建了一个目录/foodir来测试，如下:

hadoop dfs -mkdir /foodir 

谁能告诉我/foodir 保存在哪里？我怎样才能检查路径？我需要确保它没有保存在本地文件系统/tmp 下，因为每次重新启动服务器时/tmp 都会被删除。

关于如何检查服务器文件系统中的/foodir 路径有什么想法吗？

Answer 1

这取决于您如何设置 core-site.xml 和 hdfs-site.xml 文件...

如果 fs.defaultFS 未设置为 file:// 路径(默认)，则不会触及您的本地/tmp

如果你的 datanode 和 namenode 数据目录没有设置到你的本地/tmp(也是默认的)，那么那里也不会存储任何东西

您可以通过

显式创建 HDFS 路径

hdfs dfs -mkdir hdfs://namenode.fqdn:port/foodir

否则，只需运行ls/tmp 并检查是否有您创建的文件