gpt4 book ai didi

scala - 如何在 Spark 中声明一个空数据集?

转载 作者:行者123 更新时间:2023-12-03 01:00:05 26 4
gpt4 key购买 nike

我是 Spark 和 Spark 数据集的新手。我试图使用 emptyDataset 声明一个空数据集,但它要求 org.apache.spark.sql.Encoder。我用于数据集的数据类型是 case class Tp(s1: String, s2: String, s3: String) 的对象。

最佳答案

您所需要的只是在创建空数据集之前从 SparkSession 实例导入隐式编码器:import Spark.implicits._查看完整示例 here

关于scala - 如何在 Spark 中声明一个空数据集?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/46296442/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com