gpt4 book ai didi

hadoop - 如何在HDFS hadoop中释放可用空间?

转载 作者:行者123 更新时间:2023-12-02 22:06:53 24 4
gpt4 key购买 nike

如果存在空间问题,我们如何在HDFS中释放可用空间。
我们可以删除哪些文件以释放可用空间?

谢谢

最佳答案

尽可能压缩文件。

https://hadoop.apache.org/docs/current/hadoop-mapreduce-client/hadoop-mapreduce-client-core/MapReduceTutorial.html#Data_Compression

答案似乎很浅。尽力找到适合您需要的压缩方式。

或者,您可以以二进制格式(例如序列或avro)存储文件。

我们可以删除哪些文件以释放可用空间?
删除任何作业(例如MR,Hive,Pig,Spark等)不再需要的作业。

关于hadoop - 如何在HDFS hadoop中释放可用空间?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/34998676/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com