为啥写入hbase要转换成RDD,df不是也可以进行map操作么

来源:4-12 功能开发之将DF内容转成HBase要存储的列

程研板

2020-09-07

为啥写入hbase要转换成RDD,df不是也可以进行map操作么

写回答

1回答

Michael_PK

2020-09-07

这是一种写法,一般都是这么操作的。如果你按照spark外部数据源来自定义一个HBASE的实现。那就可以使用format里面写个hbase的全名就可以直接写了。这个你也可以参考外部数据源实现下肯定对你技术有很大提升的。

0
0

Spark进阶 大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

700 学习 · 190 问题

查看课程