Flink on Yarn如何解决高负载问题

来源：9-9 Flink on YARN作业

D_Mario

2019-06-20

PK老师您好, 我想咨询一下, Flink如果不是用standalone的cluster模式,而是on YARN部署的话, 他是集群的吗?
比如说对于高吞吐的输入Source数据进来, 可能作业程序可能处理不过来, on YARN的话如何解决load balance问题或提高吞吐呢?
盼回复~!

写回答

1回答

Michael_PK

2019-06-20

已采纳

1）生产上用的多数还是yarn的，flink仅仅当做一个客户端来使用呢，参考spark on yarn是一样的

2）高吞吐量进来一般都是在消息队列里，处理不过来，那就是资源问题调整或者flink代码的调优

D_Mario

非常感谢！

2019-06-20

共1条回复

新一代大数据计算引擎 Flink从入门到实战

入行或转型大数据新姿势，多语言系统化讲解，极速入门Flink

969 学习 · 296 问题

相似问题

回答 1

回答 1

回答 2

回答 1

回答 1