rdd的缓存

首页课程实战体系课手记专栏慕课教程

rdd的缓存

来源：6-11 功能开发之调优

程研板

2021-04-03

突然有个问题想不通，rdd本来不就是内存计算么，为啥还要加缓存

写回答

1回答

Michael_PK

Michael_PK

2021-04-04

rdd部分官网的persist部分章节，好好阅读下，会有收获的

0

2

Michael_PK

回复

程研板

kafka和spark的整合是通过offset去拉取的，只要offset维护好，就不会有问题

2021-04-04

共2条回复

Spark进阶大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

700 学习 · 190 问题

相似问题

请教老师这里加缓存能有什么效果呢？

回答 1

关于不同方式写入mysql？

回答 2

Hbase自身就是存数据的，为啥还要存在hdfs中呢？

回答 1

列式存储那么好，为什么还要传统行式存储的存在呢

回答 1

老师 Alluxio 能保存数据吗？还是Alluxio是hdfs之上的，数据是保存到hdfs

回答 1

打开慕课网App查看更多内容