spark离线处理读取source数据

来源:2-13 使用IDEA和Maven开发第一个Spark应用程序

qq_紫蝶侠_0

2021-06-18

老师,spark 离线处理读取hdfs中的数据,是一次读取完任务所有需要的数据,再后续map reduce操作吗

写回答

1回答

Michael_PK

2021-06-18

spark的算子是组成算子链,遇到action时才会真正开始从数据源开始加载数据

0
0

SparkSQL入门 整合Kudu实现广告业务数据分析

大数据工程师干货课程 带你从入门到实战掌握SparkSQL

535 学习 · 192 问题

查看课程