hadoop - 从 hdfs 复制文件并重命名(如果存在)

Question

有什么方法可以将文件从 hdfs 复制到本地并重命名它(如果它存在于目标位置)？
比如 part-00000 , part-00000(1), part-00000(2)

hdfs dfs -copyToLocal  /user/output-*/RunTime/p*    Runtimes/

Answer 1

不是原生的，不是。

您需要自定义代码来扫描目标文件并查看是否

1. 文件名存在，添加(1)
2. 文件名存在，且有同名文件以(n)结尾，新建(n+1)
文件

我建议您将文件下载到带时间戳的文件夹中，这样您就不会对正在使用的零件文件感到困惑，并且您可以更轻松地查看“零件文件随时间推移”