gpt4 book ai didi

hadoop - 从多个文件读取并压缩为单个文件

转载 作者:行者123 更新时间:2023-12-02 22:04:09 26 4
gpt4 key购买 nike

Hadoop的新手。

数据被加载到不同目录中的多个文件中。任务是读取多个文件并写入/压缩为单个文件。您能否分享实现此任务的最佳选择。

最佳答案

使用cat并将结果通过管道传递到put

hadoop fs -cat /directorypath/*.txt | hadoop fs -put - outputfilepath.txt

关于hadoop - 从多个文件读取并压缩为单个文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/36160134/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com