Java:HDFS复制目录

Question

有没有一种简单的方法可以将 HDFS 目录复制到 Java 中的另一个目录？

例如，我如何将/user/abc/pudding 的内容移动到/user/def/pudding？

我正在寻找一些与 UNIX 的 cp 命令等效的 HDFS，我可以用 Java 以编程方式执行它。

注意:我知道 FileSystem但它似乎只允许我从本地机器复制到 HDFS？

Answer 1

尝试FileUtil中的一种复制方法.例如:

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.FileUtil;

Configuration conf = new Configuration();  // if necessary
FileSystem fileSystem = FileSystem.get(conf);  // if necessary

FileUtil.copy(
    fileSystem, new Path("/path/to/src"),
    fileSystem, new Path("/path/to/dst"),
    false,  // move if true
    conf
);