sparksql的string转日期格式(将string类型的数据类型转换为spark rdd时报错的解决方法)
类别:脚本大全 浏览量:2222
时间:2022-01-28 01:39:40 sparksql的string转日期格式
将string类型的数据类型转换为spark rdd时报错的解决方法
在将string类型的数据类型转换为spark rdd时,一直报这个错,StructType can not accept object %r in type %s” % (obj, type(obj)))
|
. . . s = str (tree) y = str (YESTERDAY) list0 = [s, y] outRes = self .sc.parallelize(list0) df_tree = outRes.toDF( "model: string, dt: string" ).registerTempTable( "temp" ) . . . |
查了半天的资料,问了不少同事都没能解决掉这个bug。最后终于google到一个类似的case,终于把问题解决。记录一下!
|
. . . s = str (tree) y = str (YESTERDAY) list0 = [s, y] outRes = self .sc.parallelize([list0]) df_tree = outRes.toDF( "model: string, dt: string" ).registerTempTable( "temp" ) . . . |
上面的问题办法是,将sc.parallelize([list0])
中的list0
再转成一个整体list
,问题即可解决。
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对开心学习网的支持。如果你想了解更多相关内容请查看下面相关链接
原文链接:https://blog.csdn.net/y999666/article/details/78649760
您可能感兴趣
- C#中string.format的格式和用法
- sqlservercount函数怎么用(Sql Server中Substring函数的用法实例解析)
- python字符串之基本操作小练习(Python数据类型之String字符串实例详解)
- sparksql的string转日期格式(将string类型的数据类型转换为spark rdd时报错的解决方法)
- Request、Request.Form、Request.QueryString的区别
- Guid ToString的格式
- connectionStrings数据库连接字符串的介绍
- DateTime.ToString 格式化时间字符串
- String.Empty,NULL和""的区别
- 详解SqlServer数据库中Substring函数的用法(详解SqlServer数据库中Substring函数的用法)
- C# string 和 stringbuilder 的区别
- python redis锁的使用(Python操作redis实例小结String、Hash、List、Set等)
- js实现string.format 字符串占位符
- js中substring的用法、与substr的区别
- php面向对象怎么调用属性(PHP面向对象程序设计__tostring和__invoke用法分析)
- 如何判断数据是json还是字符串(JSON.stringify的多种用法总结)
- 一个30岁男人外遇失败的全过程(一个30岁男人外遇失败的全过程)
- 《无敌破坏王2》 不聊彩蛋,聊聊我从动画里看到的现实那些事儿(无敌破坏王2不聊彩蛋)
- 《寄生虫》 三观不正 人类悲欢从来不相通,感同身受也并非本能(寄生虫三观不正)
- 这部动漫中的女孩子,可比101女孩更加励志(这部动漫中的女孩子)
- 《白狐的人生》热拍 贾征宇偶像包袱难自弃 图(白狐的人生热拍)
- 七夕取消了,牛郎织女没做核酸七夕已经取消(牛郎织女没做核酸七夕已经取消)
热门推荐
- dedecms导航条长度(去掉dedecms友情链接中的LI标签的方法)
- extjs Border边框布局
- dedecms使用教程(dedecms二级菜单中判断子菜单标签的使用方法)
- python将一个字符串逆序输出(Python字符串逆序的实现方法一题多解)
- css 自适应手机屏幕(Css实现手机端页面强制横屏的方法示例)
- python交互执行shell脚本(python 利用文件锁单例执行脚本的方法)
- pythonsocket编写web服务器(局域网内python socket实现windows与linux间的消息传送)
- sqlserver数据库基本操作(SQL Server四个系统表的知识讲解)
- python的几种数据结构(python中的数据结构比较)
- css3左右移动动画效果(CSS3鼠标悬浮过渡缩放效果)
排行榜
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9