spark standalone 下如果master挂掉了怎么办?

来源:3-5 Spark Standalone模式环境搭建

慕仙4974986

2018-12-13

spark standalone 下如果master挂掉了怎么办?
怎么没有高可用?
是否可以在多台机器上启动master
在提交作业的时候,spark-submit --master 是否可以填写多个地址
感觉不可以,如果可以为什么不是 --masters

再次视频中,或者官网我没有看到zookeeper的身影。如果没有高可用的设置,那么改怎么办?spark作为成熟的分布式框架,不应该这样吧?

写回答

2回答

Michael_PK

2018-12-13

我们上课是local模式,最后是提交到yarn运行,不需要spark集群,就不需要spark ha

0
0

Michael_PK

2018-12-13

master配置成HA,官网上有

0
2
Michael_PK
回复
慕仙4974986
找不到就Google搜,肯定能搜到
2018-12-13
共2条回复

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程