gpt4 book ai didi

hadoop - 清除hdfs中的/tmp目录

转载 作者:可可西里 更新时间:2023-11-01 16:52:26 26 4
gpt4 key购买 nike

这是否正确,hdfs 中的 /tmp 目录每 24 小时自动清除一次(默认情况下)?

最佳答案

HDFS /tmp目录主要用作mapreduce运行时的临时存储。 Mapreduce 工件、中间数据等将保存在此目录下。当 mapreduce 作业执行完成时,这些文件应该被自动清除。如果删除此临时文件,可能会影响当前正在运行的 mapreduce 作业。

临时文件由 pig 创建。临时文件删除发生在最后。如果脚本执行已归档或终止,Pig 不会处理临时文件删除。然后你必须处理这种情况。您最好在脚本本身中处理此临时文件清理事件。

关于hadoop - 清除hdfs中的/tmp目录,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31775457/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com