spark 提交任务执行失败

来源:6-7 Spark部署及服务器端测试

两万七千历

2022-03-12

Diagnostics: Not able to initialize app-log directories in any of the configured local directories for app application_1647075705220_0001

图片描述
我的Handoop 全都启动的 spark 用的是老师提供的编译好的包,wordCount 程序在本地可以跑

写回答

1回答

Michael_PK

2022-03-12

1)检查YARN UI,看看上面的RM NM是否正确

2)直接跑一个MR的wordcount到yarn,看看是否你的yarn就有问题,进而引发你这里的spark作业根本提交不上去

0
0

Spark3实时处理-Streaming+StructuredStreaming实战

实战Spark3实时处理,掌握两套企业级处理方案

347 学习 · 238 问题

查看课程