intellij idea 执行json保存文件时候报错？

来源：7-5 -操作Parquet文件数据

慕粉2038411182

2017-07-12

执行代码：

userDF.write.format("json").save("C:\\Users\\admin\\Desktop\\data\\jsonout")

报错

Caused by: org.apache.spark.SparkException: Job aborted due to stage failure: Task 0 in stage 2.0 failed 1 times, most recent failure: Lost task 0.0 in stage 2.0 (TID 2, localhost, executor driver): java.lang.NullPointerException

保存目录下生成的是临时的空文件？

另外，同样的命令，在spark-shell下运行正常，请问老师这是为什么？

写回答

1回答

Michael_PK

2017-07-12

可能是windows编码问题，可以尝试下在Linux环境上装个idea试试

以慕课网日志分析为例进入大数据Spark SQL的世界

快速转型大数据：Hadoop，Hive，SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程

相似问题

win清洗存储到目标地址报错

回答 3

找不到ipRegion.xlsx文件

回答 2

在windows环境下，IDEA写json文件报错，麻烦帮忙看看，谢谢！

回答 1

IDEA运行HiveMySQLApp.scala时报OutOfMemoryError错误

回答 1

使用saveAsTextFile（）保存时报错

回答 1

打开慕课网App查看更多内容