java - Apache Pig，抑制 "Output Location Validation Failed" "Output directory ... already exists"

Question

在得到 orangeoctopus 的帮助后 this question ，我现在需要抑制消息“输出位置验证失败”“输出目录......已经存在”。我知道目录存在，我想要那样。我很确定这将是覆盖我的存储 UDF 中的某些内容的问题，但我无法弄清楚是什么。对 Java 完全陌生，所以请多多包涵。提前致谢。

Answer 1

据我所知，您不能重复使用直接输出目录。 Hadoop 阻止了它。如果我理解正确的话，你正在处理每日日志，因此，我建议你设置一个名为输出的父输出目录，并将脚本中的输出目录设置为 output/daily_date。