hadoop - hive 命令错误 Expression Not In Group By Key product_id

Question

我有一个HDFS表A，写成如下格式

user  product
U1       101
U1       102
U1       103
U2       101
U2       104
U3       102

......................

describe A;
>> user   string
   product int

现在如果要聚合用户，将同一用户的产品归为一组，hive命令应该怎么写？

select user, product from A group by user;

error: line 1:14 Expression Not In Group By Key product

Answer 1

您可以使用 hive 中的 collect_set(col) 函数按用户名聚合产品。

使用下面的命令:

select user,collect_set(product) from A group by user;

你会得到如下输出:

U1      [102,103,101]
U2      [101,104]
U3      [102]

请引用Hive Documentation for collect_set()获取更多信息。