sparksql的string转日期格式(将string类型的数据类型转换为spark rdd时报错的解决方法)
类别:脚本大全 浏览量:2222
时间:2022-01-28 01:39:40 sparksql的string转日期格式
将string类型的数据类型转换为spark rdd时报错的解决方法
在将string类型的数据类型转换为spark rdd时,一直报这个错,StructType can not accept object %r in type %s” % (obj, type(obj)))
|
. . . s = str (tree) y = str (YESTERDAY) list0 = [s, y] outRes = self .sc.parallelize(list0) df_tree = outRes.toDF( "model: string, dt: string" ).registerTempTable( "temp" ) . . . |
查了半天的资料,问了不少同事都没能解决掉这个bug。最后终于google到一个类似的case,终于把问题解决。记录一下!
|
. . . s = str (tree) y = str (YESTERDAY) list0 = [s, y] outRes = self .sc.parallelize([list0]) df_tree = outRes.toDF( "model: string, dt: string" ).registerTempTable( "temp" ) . . . |
上面的问题办法是,将sc.parallelize([list0])
中的list0
再转成一个整体list
,问题即可解决。
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对开心学习网的支持。如果你想了解更多相关内容请查看下面相关链接
原文链接:https://blog.csdn.net/y999666/article/details/78649760
您可能感兴趣
- mysql substr函数的用法(MySQL切分函数substring的具体使用)
- C# string 和 stringbuilder 的区别
- python redis锁的使用(Python操作redis实例小结String、Hash、List、Set等)
- js实现string.format 字符串占位符
- DateTime.ToString 格式化时间字符串
- 详解SqlServer数据库中Substring函数的用法(详解SqlServer数据库中Substring函数的用法)
- sparksql的string转日期格式(将string类型的数据类型转换为spark rdd时报错的解决方法)
- 用javascript解析json(JavaScript JSON.stringify的使用总结)
- hive数值转字符串(hive中将string数据转为bigint的操作)
- C#中ToString()常见的格式
- Guid ToString的格式
- C#中string.format的格式和用法
- Request、Request.Form、Request.QueryString的区别
- connectionStrings数据库连接字符串的介绍
- String.Empty,NULL和""的区别
- python字符串之基本操作小练习(Python数据类型之String字符串实例详解)
- CellPress旗下的6 期刊,国人友刊来了解一下吧(CellPress旗下的6期刊国人友刊来了解一下吧)
- ()
- SCI检索 SSCI检索 EI检索 ISTP检索 CSCD检索简介(SCI检索SSCI检索EI检索)
- 参考文献里期刊名称的写法,你知道吗(参考文献里期刊名称的写法)
- 硕博期刊 SCI SSCI CSSCI分不清 一文带你看懂主流期刊分类(硕博期刊SCISSCI)
- 辱华品牌新百伦官宣新代言人IU,个别粉丝希望get爱豆同款(辱华品牌新百伦官宣新代言人IU)
热门推荐
- dede栏目seo怎么设置(DedeCMS 标题seo优化 给列表页加上第x页)
- php创建文件(php创建多级目录与级联删除文件的方法示例)
- mysql分页查询有几种(MySQL 查询的排序、分页相关)
- dedecms文章权重排序(Dedecms实现tags云标签随机颜色与字体大小方法详解)
- 何谓SQLSERVER参数嗅探问题(何谓SQLSERVER参数嗅探问题)
- dedecms标签怎么调用(DEDECMS自定义表单提交后的跳转链接修改方法)
- sqlserver百分比数据查询时间(SQL Server统计信息更新时采样百分比对数据预估准确性的影响详解)
- css3伸缩布局教学(css3 利用transform-origin 实现圆点分布在大圆上布局及旋转特效)
- sql server附加数据库出错(SQL Server附加数据库报错无法打开物理文件,操作系统错误5的图文解决教程)
- asp.net如何实现word文档在线预览
排行榜
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9