gpt4 book ai didi

java - Spark中如何对分区的内容进行排序?

转载 作者:行者123 更新时间:2023-12-02 02:35:23 27 4
gpt4 key购买 nike

repartitionAndSortWithinPartitions 方法效果很好。

但我真的不想重新分区。我对数据自然分区的方式感到满意。

我确实想对每个分区的内容进行排序。

我对完全排序不感兴趣。

本质上,我想避免数据的重新排列。我只需要对每个分区内容进行排序即可。

最佳答案

这对分区内的数据进行排序。

df.sortWithinPartitions('<sort_column>').show()

关于java - Spark中如何对分区的内容进行排序?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/57206479/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com