apache-spark - 如何在 Spark RDD 中选择一系列元素？

Question

我想在 Spark RDD 中选择一系列元素。例如，我有一个包含一百个元素的 RDD，我需要选择 60 到 80 个元素。我该怎么做？

我看到 RDD 有一个 take(i: int) 方法，它返回第一个 i 元素。但是没有对应的方法来取最后的 i 个元素，或者从某个索引开始从中间开始的 i 个元素。

Answer 1

对于那些偶然发现这个问题并寻找与 Spark 2.x 兼容的答案的人，您可以使用 filterByRange