一个疑问，有点没理解明白

来源：9-2 -Push方式整合之概述

Echo鑫

2017-11-09

Choose a machine in your cluster such that

When your Flume + Spark Streaming application is launched, one of the Spark workers must run on that machine.

Flume can be configured to push data to a port on that machine.

这段话中的集群指的是Flume集群还是Spark集群？

另外，老师，我这样理解对不：

选中一台机器，数据传输到这台机器的Flume的agent中，然后sink到这台机器spark worker里（通过设置好的端口），然后spark worker传输到spark集群进行处理。

写回答

1回答

Michael_PK

2017-11-10

已采纳

spark集群或者yarn集群。你的理解ok

Echo鑫

非常感谢！

2017-11-10

共1条回复

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

相似问题

回答 1

回答 1

回答 1

回答 10

回答 5