hive - 如何在 pig / hive 中相应的几列中进行转置

Question

我想知道是否可以在 pig / hive 中进行相应的几列换位。
在处理数据时，我得到了低于要求的数据

id      jan     feb     march
1       j1      f1      m1
2       j2      f2      m2
3       j3      f3      m3

我需要将它与第一列转置，所以它看起来像 -

id      value   month
1       j1      jan
1       f1      feb
1       m1      march
2       j2      jan
2       f2      feb
2       m2      march
3       j3      jan
3       f3      feb
3       m3      march

我已经用java尝试过这个，但是要让它进入分布式模式，有没有办法在pig/hive中做到这一点。
提前感谢您的帮助!!

Answer 1

是的，这在 Hive 中使用内置的“堆栈”UDF 和 case 语句绝对是可能的。这样的事情应该工作:

select id, value, CASE
WHEN value like 'j%'
THEN 'jan'
WHEN value like 'f%'
THEN 'feb'
WHEN value like 'm%'
THEN 'march'
ELSE ''
END as month
from table
lateral view stack(3, jan, feb, march) tb as value
;

让我知道这个是否奏效。