dictionary - Hive - 将行分组到 map 中

Question

我有一张这样的 table

Col1   Col2   Col3
A      1      word1
A      2      word2
A      3      word3
A      4      word4
B      1      word1
B      3      word3

我想按 col1 对 col2 和 col3 进行分组，但将 col2 和 col3 保留在 map 中，如下所示:

Col1   map(col2, col3)
A      [(1, word1), (2, word2), (3, word3), (4, word4)]
B      [(1, word1), (3, word3)]

我知道有一种方法可以只用一个数组来做到这一点，如下所示: Grouping hive rows in an array of this rows

但我想知道这是否可以通过 map (键/值对)实现。

Answer 1

在 BrickHouse 中使用“收集”UDF http://github.com/klout/brickhouse

select col1, collect( col2, col3 )
from mytable
group by col1

您还可以将 map 与“union_map”UDAF 合并