An error occurred while calling None.org.apache.spark.api.java.JavaSparkContext.

来源:3-11 -使用IDE开发pyspark应用程序

超级塞亚仁

2019-05-14

图片描述
本地运行报错,错误信息如下:
py4j.protocol.Py4JJavaError: An error occurred while calling None.org.apache.spark.api.java.JavaSparkContext.
: org.apache.spark.SparkException: Could not parse Master URL: ‘<pyspark.conf.SparkConf object at 0x033D3A70>’

写回答

2回答

Michael_PK

2019-05-16

仔细对比视频中写的代码,你的代码写错的

0
1
超级塞亚仁
非常感谢!
2019-05-21
共1条回复

超级塞亚仁

提问者

2019-05-21

//img.mukewang.com/szimg/5ce40a1e0001525a13350646.jpg

为什么我这里SparkContext中conf=conf,是红色的,但程序居然可以正常运行。。。

0
1
Michael_PK
感觉想是你的idea有问题,一般红色是不能运行的
2019-05-22
共1条回复

Python3实战Spark大数据分析及调度

使用Python3对Spark应用程序进行开发调优,掌握Azkaban任务调度

1046 学习 · 434 问题

查看课程