driver机器cpu占用过高

来源：6-11 功能开发之调优

iceiceice_

2019-11-08

老师，我的streaming程序使用yarn模式在driver机器上占用cpu超过3000%，用standalone却很低，这是什么问题

写回答

1回答

Michael_PK

2019-11-08

你top下确定3000%的进程ID是否是你driver端的进程，如果是，那要检查你driver到底做了什么导致CPU这么高

Michael_PK

iceiceice_

你的提交机器是yarn集群的节点吗？我们不用standalone模式，因为没法资源共享和统一调度

2019-11-08

共2条回复

Spark进阶大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

700 学习 · 190 问题

相似问题

回答 1

回答 1

回答 1

回答 1

回答 1