foreachRDD

来源:8-6 -实战之Spark Streaming整合Spark SQL操作

慕设计3391687

2019-03-13

老师foreachRDD这个是一个个Rdd,如果我想合并之后统计是不是用repitition进行可以吗?这种场景符合实践吗

写回答

1回答

Michael_PK

2019-03-13

合并是union吧,repartition是数据重分区,会有shuffle

0
0

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

查看课程