gpt4 book ai didi

Pyspark 错误将 StructType 传递给 Schema

转载 作者:行者123 更新时间:2023-12-04 10:24:51 25 4
gpt4 key购买 nike

在将 StructType 传递给架构方法时出现错误:TypeError: 'StructType' object is not callable。下面是代码:

final_schema = StructType([StructField("id", StringType(), True)])
dataframe = sc.read.text('/path').schema(final_schema)

数据为字符串类型如下:

id
AO_01
AO_02
AO_03

最佳答案

更改了对 sc.read.schema(final_schema).text('/path') 的调用,因为 text(...) 将返回一个数据帧实例并且需要在此之前设置模式。

关于Pyspark 错误将 StructType 传递给 Schema,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/60666735/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com