sparksql 如何高性能写入kafka有没有案例提供谢谢

来源:3-3 SQL on Hadoop

我是风雪

2020-02-12

我想实现从hdfs读取然后批量写入kafka,能不能提高一个案例,谢谢
数据量一个csv文件50g

写回答

1回答

Michael_PK

2020-02-12

kafka适用于实时处理,而SQL离线比较多,两者不太搭吧,为什么现在这个架构呢?即使选择,那也只能按照kafkaapi的要求写数据

0
5
我是风雪
非常感谢!
2020-02-13
共5条回复

SparkSQL入门 整合Kudu实现广告业务数据分析

大数据工程师干货课程 带你从入门到实战掌握SparkSQL

535 学习 · 192 问题

查看课程