gpt4 book ai didi

scala - spark中的转换和rdd函数有什么区别?

转载 作者:行者123 更新时间:2023-12-04 18:45:31 26 4
gpt4 key购买 nike

我正在阅读 spark 教科书,我看到了转换和 Action ,我再次阅读了 rdd 函数,所以我很困惑,谁能解释转换和 spark rdd 函数之间的基本区别。

两者都用于更改 rdd 数据内容并返回一个新的 rdd 但我想知道确切的解释。

最佳答案

Spark rdd功能是 transformationsactions两个都。 Transformation是变化的函数rdd数据和 Action是一个不改变数据但给出输出的函数。
例如 :map , filter , union等等都是transformation因为它们有助于更改现有数据。reduce , collect , count都是action因为它们提供输出而不是更改数据。
更多信息请访问SparkJacek

关于scala - spark中的转换和rdd函数有什么区别?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/43839786/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com