sparkdataframe如何变换列名（spark dataframe 将一列展开,把该列所有值都变成新列的方法）
时间：2022-04-02 02:39:11 类别：脚本大全 浏览量：1230
sparkdataframe如何变换列名
spark dataframe 将一列展开,把该列所有值都变成新列的方法The original dataframe
需求：hour代表一天的24小时，现在要将hour列展开，每一个小时都作为一个列
实现：
|
|
val pivots = beijingGeoHourPopAfterDrop.groupBy("geoHash").pivot("hour").sum("countGeoPerHour").na.fill(0) |
并且统计了对应的countGeoPerHour的和，如果有些行没有这个新列对应的数据，将用null填充
The new dataframe
以上这篇spark dataframe 将一列展开,把该列所有值都变成新列的方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持开心学习网。
原文链接：https://blog.csdn.net/Nougats/article/details/78124317
您可能感兴趣
- sparksql项目实战（Spark SQL的整体实现逻辑解析）
- sparksql的string转日期格式（将string类型的数据类型转换为spark rdd时报错的解决方法）
- sparkdataframe如何变换列名（spark dataframe 将一列展开,把该列所有值都变成新列的方法）
- spark sql常用操作（Spark SQL数据加载和保存实例讲解）
- 自制橡皮泥（自制橡皮泥）
- 还在卖 禁药西布曲明网上论斤卖（还在卖禁药西布曲明网上论斤卖）
- 微商在朋友圈热卖的 DL减肥咖啡 含违禁药物，你还敢买吗（微商在朋友圈热卖的）
- 八一节，说说中国女兵（八一节说说中国女兵）
- 王治郅菜鸟赛季已让八一带入正轨，大郅七大经典语录或是成功秘诀（王治郅菜鸟赛季已让八一带入正轨）
- 庆八一，重读经典红色语录，感悟互联网发展硬道理（重读经典红色语录）
热门推荐
- php编写程序使用方法（php xhprof使用实例详解）
- mysql快速导入1亿数据（mysql批量新增和存储的方法实例）
- vue引用js库报错（Vue插件报错:Vue.js is detected on this page.问题解决）
- mysql操作时间的函数（一篇文章搞定Mysql日期时间函数）
- 入门云主机推荐（怎么样购买到心仪又便宜的云主机？）
- python处理所有异常（Python异常处理知识点总结）
- mysql子查询用法（MySQL 子查询和分组查询）
- 怎么用docker中的mysql连接数据库（解决Docker之mysql容器数据库更改不生效的问题）
- python转图片为字符图（Python实现图片转字符画的代码实例）
- python中的多线程详解（python多线程抽象编程模型详解）