gpt4 book ai didi

apache-spark - 在 spark.SQL DataFrame 和 pandas DataFrame 之间转换

转载 作者:行者123 更新时间:2023-12-03 15:08:40 24 4
gpt4 key购买 nike

这个问题在这里已经有了答案:





Requirements for converting Spark dataframe to Pandas/R dataframe

(1 个回答)


4年前关闭。




有没有可能

转换自


pd.DataFrame

在 %pyspark 环境下?

最佳答案

试试:

spark_df.toPandas()

toPandas()

Returns the contents of this DataFrame as Pandas pandas.DataFrame.

This is only available if Pandas is installed and available.

如果你想要相反的:
spark_df = createDataFrame(pandas_df)

关于apache-spark - 在 spark.SQL DataFrame 和 pandas DataFrame 之间转换,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/41826553/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com