gpt4 book ai didi

sql - Hive 和 Pig 中的不平等加入

转载 作者:可可西里 更新时间:2023-11-01 17:00:21 26 4
gpt4 key购买 nike

我正在开始一个项目,我需要做一些不平等的加入。现在,我读到 Pig 和 Hive 都不支持不等式 Join。我还读到 Pig 可以通过使用 CROSS 和 FILTER 来支持它。我也可以在 Hive 中使用 WHERE 子句来做到这一点吗?是否存在不可能的情况?

最后,假设我可以在 Pig 和 Hive 中都做到这一点,哪个性能更好?

最佳答案

我记得Hive只能用一个reducer做“CROSS”。 Pig 使用一种智能的方法来实现“CROSS”并并行运行它,它通常比 Hive 具有更好的性能。

顺便说一句,我已经一年没有更新关于 Hive 和 Pig 的知识了。我不确定 Hive 在过去一年中是否改进了“CROSS”。

关于sql - Hive 和 Pig 中的不平等加入,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/25024282/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com