实际生产环境是如何部署的?

来源:11-4 -文本数据自定义外部数据源实现案例分享

慕桂英1146026

2018-12-07

java代码和sparkSQL在一个工程?

sparkSQL离线处理和sparkStreaming实时流处理在一个工程?

还是都分开的?

如果是都分开的怎么体现spark和java是无缝整合的,这里不是很明白

写回答

2回答

Michael_PK

2018-12-07

一个工程里scala和Java混编是非常正常的。

0
1
慕桂英1146026
非常感谢!
2018-12-07
共1条回复

Michael_PK

2018-12-07

批处理和实时处理通常是分开的,一般都是不同团队开发的

0
3
Michael_PK
spark作业开发完就是一个jar,提交运行
2018-12-07
共3条回复

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程