java - 我也可以使用 hadoop jar 命令来运行普通的 java 程序吗？

Question

我的 Java 代码中有一些 hadoop 文件系统操作(例如:hdfs mkdir)。当我尝试使用 java -cp 运行 java 程序时，该目录在 linux 本地文件系统中创建。所以我用 hadoop jar 命令运行程序，目录在 hdfs 中创建。现在我打算使用 hadoop jar 命令运行整个 java 程序。我想知道使用 hadoop jar 命令会不会有任何问题，尤其是在从本地文件夹读取文件或执行 Runtime.getRuntime().exec(some linux command); 以下代码片段时我的hdfs文件操作

Configuration conf = new Configuration();       
FileSystem fs = FileSystem.get(conf);
boolean res = fs.mkdirs(directory path);

Answer 1

是的，hadoop jar命令也可以用来运行普通的java程序。但反之则不对。 Hadoop文件系统操作只能在hadoop环境下运行。但是，如果您在 hadoop 集群中运行，则 linux 命令可能会在从属节点中执行。