实时处理更新怎么处理?

来源:8-8 Spark Streaming对接Kafka能真正做到仅消费一次吗

慕慕2074236

2019-09-03

你好,实时计算是7*24在线的。那如果想更新实时计算程序怎么处理呢?谢谢!!

写回答

1回答

Michael_PK

2019-09-03

如果业务发生了变更,肯定要升级代码,那么不严格的方式就是先杀了再启动,此时offset肯定要自己管理好,否则就是数据有重复或者丢失。严格的方式就是并行跑,这样就有数据重复的可能,是程序员必须要代码控制好的。

1
0

Spark进阶 大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

700 学习 · 190 问题

查看课程