老师,使用了很多方法,每秒写入数据三百万,这样的压力依然如图

首页课程实战体系课手记专栏慕课教程

老师,使用了很多方法,每秒写入数据三百万,这样的压力依然如图

来源：4-6 -Kafka单节点多broker部署及使用

慕运维7479159

2018-02-10

为什么不能分配给其他服务器运算

写回答

2回答

Michael_PK

Michael_PK

2018-02-11

不能分配只有两可能，1数据倾斜，2kafka没分区

0

0

Michael_PK

Michael_PK

2018-02-10

你的集成方式是啥？对于spark的partition数量多少，并行度多少，都是有很大关系的

0

1

慕运维7479159

老师,集成方式分为哪几种?

2018-02-11

共1条回复

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

相似问题

老师,使用了很多方法,每秒写入数据三百万,这样的压力依然如图

回答 1

老师我用sparkstreaming读topic数据保存到hdfs上的格式是parquet,但我还要保存他的schema这个改怎样去做

回答 1

老师我有个问题：首先数据到kafka，数据是要全部弄到kafka上，streaming在去处理，还是数据一点一点的到kafka上...

回答 1

使用Flume采集Log4j产生的日志那节，如果将log4j.properties中rootLogger输出的日志级别改为DEBUG

回答 3

请问Flume足够的内存是多少生产中至少是多少

回答 1

打开慕课网App查看更多内容