gpt4 book ai didi

java - 仅映射的 UDF 是否受益于代数或累积?

转载 作者:可可西里 更新时间:2023-11-01 16:32:52 25 4
gpt4 key购买 nike

在 Hadoop 上的 Pig 中,我有一个应用于大元组的 Java UDF,它仅采用大元组的 4 个字段,并且(在一些重要的计算之后)返回两个新值,我附加到大元组上。

没有减少阶段。

Can this benefit from being made Algebraic, or Accumulative?

在没有任何分组的情况下,我看不出它会如何提高速度。似乎分组只是为了尝试获得加速是在错误方向上的巨大飞跃。

最佳答案

不,我认为您正在创建一个常规的 EvalFunc。使其成为AlgebraicAccumulative 是没有意义的。

LOWERREGEX_EXTRACT是其他 EvalFunc 的示例,它们没有实现您提到的任何接口(interface)。

关于java - 仅映射的 UDF 是否受益于代数或累积?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/21864870/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com