Spark启动

来源:3-4 Spark Local模式环境搭建

ALGO_cui

2017-12-02

Spark启动后报了一大堆java相关的错误,附图中只是报错的开始,太多无法附上,是驱动没加载么?还是?

我下载使用的是完整版,想先快速走一边,前面HDFS,Yarn,Hive启动都没问题,就是Spark这里报错。

http://img.mukewang.com/szimg/5a21ac390001fd8a18930817.jpg

写回答

4回答

Michael_PK

2017-12-02

--jars试试

1
5
ALGO_cui
非常感谢!
2017-12-03
共5条回复

ALGO_cui

提问者

2017-12-03

//img.mukewang.com/szimg/5a22de85000144dc19030719.jpg

成功!但每次启动都要用--jars才行 :-(,有点麻烦。

1
2
ALGO_cui
回复
Michael_PK
ok,谢谢老师
2017-12-04
共2条回复

ALGO_cui

提问者

2017-12-02

//img.mukewang.com/szimg/5a228e71000128d718850753.jpg

上面就是报完错后的截图,报了许多的错后,这Spark好像是启动了,不理解了?

0
0

ALGO_cui

提问者

2017-12-02

我先查了bash_profile,发现里面java版本如图//img.mukewang.com/szimg/5a2241320001725609270082.jpg

而老师课程中的是jdk1.7.0_45。应该不是这个问题吧?

0
0

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程