DataFrame在输出时如何关闭类型推断??

来源:9-11 -需求一统计功能实现

modata

2017-09-18

在DataFrame保存为parquet格式的文件时,总报如下错误:

java.lang.RuntimeException: Error while encoding: java.lang.RuntimeException: java.lang.Integer is not a valid external type for schema of string

请问如何在输出时取消类型推断?或者怎么解决DataFrame写文件时这个错误!!!!

写回答

3回答

modata

提问者

2017-09-24

抱着不解决问题,不继续学的态度!终于搞定本问题了》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》

1
0

modata

提问者

2017-09-20

定义了structype,而且df.show(false)可以正常输出,唯独写文件时报错!!!目前仍未解决!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!

0
0

Michael_PK

2017-09-18

你用自己的structtype

0
4
modata
我想说,为什么我的问题都没解决,要把我的回答给删除?这是不是有点假啊!!!!!!!!!!!!!!!!!!
2017-09-20
共4条回复

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程