apache-pig - 是否可以在 Pig 中管理 NO FILE 错误？

Question

我正在尝试加载简单文件:

log = load 'file_1.gz' using TextLoader AS (line:chararray);
dump log

我收到一个错误:

2014-04-08 11:46:19,471 [main] ERROR org.apache.pig.tools.pigstats.SimplePigStats - ERROR 2997: Unable to recreate exception from backend error: org.apache.pig.backend.executionengine.ExecException: ERROR 2118: Input Pattern hdfs://hadoop1:8020/pko/file*gz matches 0 files
        at org.apache.pig.backend.hadoop.executionengine.mapReduceLayer.PigInputFormat.getSplits(PigInputFormat.java:288)
        at org.apache.hadoop.mapred.JobClient.writeNewSplits(JobClient.java:1054)

是否可以在错误出现之前管理这种情况？

Answer 1

输入模式 hdfs://hadoop1:8020/pko/file*gz 匹配 0 个文件

错误是给定的 hdfs 路径中不存在输入文件。

log = load 'file_1.gz' 使用 TextLoader AS (line:chararray);
由于您没有提到 file_1.gz 的绝对路径，它将采用您正在运行 Pig-script 的用户的主 hdfs 目录