hadoop - 格式无效 : "19690321" is too short

Question

我正在尝试使用 pig 将 yyyyMMdd 格式转换为 yyyy/MM/dd 格式，因为我在下面编写了代码。

代码:

STOCK_A = LOAD '/user/root/xxxx/*' USING PigStorage('|'); 
data = FILTER STOCK_A BY ($1 matches '.*ID.*'); 
MSH_DATA = FOREACH data GENERATE ToDate($8,'yyyy/MM/dd','UTC') AS dob;

当我尝试转储结果时，出现以下错误。

ERROR org.apache.pig.tools.pigstats.SimplePigStats - ERROR 0: Exception while executing [POUserFunc (Name: POUserFunc(org.apache.pig.builtin.ToDate3ARGS)[datetime] - scope-209 Operator Key: scope-209) children: null at []]: java.lang.IllegalArgumentException: Invalid format: "19690321" is too short

示例:

EXVORV@#PDULD21F|ID|1|483|1020783||EXVORV@#PDULD||19690321|F|

$8 对我来说似乎有效，我无法找到问题出现的原因。非常感谢任何帮助。

Answer 1

您使用:

ToDate($8,'yyyy/MM/dd','UTC')

但是格式是

19690321

所以你应该有

ToDate($8,'yyyyMMdd','UTC')