以Flink的Per-Job-Cluster模式提交任务的时候报没有可用的slot,调哪些参数呢?

来源:13-9 正确的学习姿势分享

情剑莫邪

2020-11-10

以Flink的Per-Job-Cluster模式提交任务的时候报没有可用的slot,除了调taskmanager.numberOfTaskSlots参数外还要调哪些参数呢?

写回答

1回答

Michael_PK

2020-11-10

你这个是yarn集群的还是flink自带的standalone的?

0
5
Michael_PK
回复
情剑莫邪
了解了。并行度大体上分成如下几个部分:全局,source,operator,sink,operator之间发生了distribute。source是和不同的数据源是否支持并行有很大关系,operator的并行度这个要取决于你作业计算的复杂度以及你集群能提供出多少资源给这个作业使用有很大关系,这个要实际情况来评估。你说的那个参数是全局的,啥都不设置才会使用它。
2020-11-11
共5条回复

新一代大数据计算引擎 Flink从入门到实战

入行或转型大数据新姿势,多语言系统化讲解,极速入门Flink

969 学习 · 296 问题

查看课程