gpt4 book ai didi

spark dataframe 将一列展开,把该列所有值都变成新列的方法

转载 作者:qq735679552 更新时间:2022-09-28 22:32:09 31 4
gpt4 key购买 nike

CFSDN坚持开源创造价值,我们致力于搭建一个资源共享平台,让每一个IT人在这里找到属于你的精彩世界.

这篇CFSDN的博客文章spark dataframe 将一列展开,把该列所有值都变成新列的方法由作者收集整理,如果你对这篇文章有兴趣,记得点赞哟.

The original dataframe 。

spark dataframe 将一列展开,把该列所有值都变成新列的方法

需求:hour代表一天的24小时,现在要将hour列展开,每一个小时都作为一个列 。

实现:

?
1
val pivots = beijingGeoHourPopAfterDrop.groupBy( "geoHash" ).pivot( "hour" ). sum ( "countGeoPerHour" ).na.fill( 0 )

并且统计了对应的countGeoPerHour的和,如果有些行没有这个新列对应的数据,将用null填充 。

The new dataframe 。

spark dataframe 将一列展开,把该列所有值都变成新列的方法

以上这篇spark dataframe 将一列展开,把该列所有值都变成新列的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持我.

原文链接:https://blog.csdn.net/Nougats/article/details/78124317 。

最后此篇关于spark dataframe 将一列展开,把该列所有值都变成新列的方法的文章就讲到这里了,如果你想了解更多关于spark dataframe 将一列展开,把该列所有值都变成新列的方法的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。

31 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com