跑yarn上问题

来源：2-17 YARN模式下提交Spark应用程序

weixin_慕慕2501778

2020-03-29

老师我在yarn上跑wordcount，最开始出错，我查看错误说是需要分配8G多内存没分配到，重试命令，后面也没出现错误信息，但是直接就killed掉了是什么原因？
图片描述

写回答

1回答

Michael_PK

2020-03-29

你先使用yarn跑一个mr的wc看看，先确保yarn是正常的先

Michael_PK

weixin_慕慕2501778

一个是设置exe的内存，一个是设置堆外内存。从这现象看，还是你集群的nm上启动的默认的container资源不够，导致被kill

2020-03-30

共2条回复

SparkSQL入门整合Kudu实现广告业务数据分析

大数据工程师干货课程带你从入门到实战掌握SparkSQL

535 学习 · 192 问题

相似问题

回答 1

回答 1

回答 1

回答 1

回答 1