gpt4 book ai didi

hadoop - spark sc.textfile 的详细工作原理是什么?

转载 作者:可可西里 更新时间:2023-11-01 16:25:11 31 4
gpt4 key购买 nike

我想详细了解 sc.textfile 的工作原理。
我在 SparkContext.scala 中找到了文本文件源代码,但它们包含很多关于调度程序、阶段和提交的任务的信息。我想要的是sc.textfile如何从hdfs中读取文件,以及sc.textfile如何使用通配符来匹配多个文件。
在哪里可以找到源代码?

最佳答案

关于hadoop - spark sc.textfile 的详细工作原理是什么?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/36306519/

31 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com