hadoop - 将 pig 结果存储在文本文件中

Question

嗨，stackoverflow 社区；

我对 pig 完全陌生，我想将结果存储在一个文本文件中并根据需要命名。是否可以使用 STORE 函数执行此操作。

我的代码:

a = LOAD 'example.csv' USING PigStorage(';');

b = FOREACH a GENERATE $0,$1,$2,$3,$6,$7,$8,$9,$11,$12,$13,$14,$20,$24,$25;

STORE b INTO ‘myoutput’;

谢谢。

Answer 1

是的，您将能够将结果存储在 myoutput.txt 中，并且您可以使用 PigStorage 将数据加载到包含任何分隔符的文件中。

a = LOAD 'example.csv' USING PigStorage(';');
b = FOREACH a GENERATE $0,$1,$2,$3,$6,$7,$8,$9,$11,$12,$13,$14,$20,$24,$25;
STORE b INTO ‘myoutput.txt’ using PigStorage(';');