hadoop - 删除Pig中的空行

Question

我有一个打击像这样的数据集:

1,abc,10000
,zxcv,2000
, , ,
4,xyz,50000

我想要像这样的输出:

1,abc,10000 
zxcv,2000
4,xyz,50000

我该如何完成这项任务？
即我想删除空行和 null值。

Answer 1

试试Filter Operator:

A = LOAD 'your_data' USING PigStorage() AS (your fields);

B = FILTER A BY your_fields IS NOT NULL;