想请问一下老师yarn的问题

来源:5-8 提交流量统计案例到YARN上运行

KelvinChung

2020-02-01

问题一:就是类似这个之前的wordcount案例,也是在hadoop上跑的呀,这个跟现在这节课的yarn有什么区别呢,就是是把整个包打到hadoop上运行才能说是在yarn上跑吗??
问题二:之前的NameNode跟DataNode跟,RM,NM有什么关系呢?之前说是的NameNode也是监控下面的DateNode有没有挂掉,感觉跟RM差不多诶图片描述

写回答

2回答

Michael_PK

2020-02-01

跑yarn上就是把输入输出的参数做成可以配置的,和本地开发测试的代码基本一样呢。nn和dn是主从的是hdfs的进程。rm和nm是主从是yarn的进程

0
3
KelvinChung
非常感谢!
2020-02-01
共3条回复

Michael_PK

2020-02-01

跑yarn上就是把输入输出的参数做成可以配置的,和本地开发测试的代码基本一样呢。nn和dn是主从的是hdfs的进程。rm和nm是主从是yarn的进程

0
0

Hadoop 系统入门+核心精讲

从Hadoop核心技术入手,掌握数据处理中ETL应用,轻松进军大数据

2397 学习 · 902 问题

查看课程