structuredstream和sparkstream的适应场景有什么区别?

来源:8-8 对接csv数据源数据

fuyang7412

2023-02-01

看了视频感觉都是来了数据就统计一下然后追加到hbase里面去,有啥功能必须用structuredstream实现更好?

写回答

1回答

Michael_PK

2023-02-02

比如:你要基于eventtime来进行处理的,在spark中只能使用sss,因为ss并不支持基于事件时间来处理。


实时处理的应用场景大多数都是基于Kafka来的数据对接实时计算引擎,然后经过etl后,快速出结果存到某个地方,或者将清洗后的数据落到某个地方,供后期其他应用使用。


0
0

Spark3实时处理-Streaming+StructuredStreaming实战

实战Spark3实时处理,掌握两套企业级处理方案

340 学习 · 238 问题

查看课程