checkpoint读取

来源:15-6 -offset管理演示二

慕设计3391687

2019-03-15

使用checkpoint的时候缺点是要么从读取的checkpion创建sparkstreamin,要么new一个,讲到缺点是如果修改代码就会导致偏移量错误,这里说的修改代码只是checkpoint的目录吧?其他代码修过没有影响吧

写回答

1回答

Michael_PK

2019-03-15

check point机制线上是不能用于保存offset的,主要代码更新啥的,肯定是存在问题的

0
0

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

查看课程