gpt4 book ai didi

hadoop - 目录为空时如何防止 Hadoop 作业失败?

转载 作者:可可西里 更新时间:2023-11-01 14:37:21 25 4
gpt4 key购买 nike

当输入目录中没有文件时,我有一个作业失败了。我得到的异常如下:

org.apache.hadoop.mapreduce.lib.input.InvalidInputException:Input Pattern maprfs:/profile/*

我知道这个异常来自 FileInputFormat 类。解决这个问题的最佳方法是什么。覆盖 InputFormat 类是唯一的解决方案吗?

谢谢

最佳答案

  1. 在您的输入路径中放置一个空文件。

  2. 在驱动程序的开头列出您的输入路径 (S)。如果没有文件,则不提交作业直接退出。

关于hadoop - 目录为空时如何防止 Hadoop 作业失败?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/32721072/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com