往hdfs上传输文件出错

来源:1-20 -YARN环境搭建及提交作业到YARN上运行

慕的地5108060

2018-06-13

http://img.mukewang.com/szimg/5b20faed00014b4516000787.jpg

怎么能查找出错的原因?

写回答

3回答

慕的地5108060

提问者

2018-06-13

我使用的阿里云 1核1G的ECS  做测试。。。centos7.4镜像。是不是机器配置太低了?

0
1
Michael_PK
太低了。。。这配置还不如自己整个VM环境
2018-06-14
共1条回复

慕的地5108060

提问者

2018-06-13

我重建了namenode,现在文件可以放进去了。

//img.mukewang.com/szimg/5b212fb80001ef6e29920304.jpg

我也正常启动了yarn

//img.mukewang.com/szimg/5b212fd00001f99429840744.jpg

当我添加统计任务的时候报错

//img.mukewang.com/szimg/5b212ff80001af0a16001074.jpg

同时 好像 hdfs服务挂了。因为我访问 http://hadoop000:50070/ 这个页面没有响应了。

//img.mukewang.com/szimg/5b2130920001742e16000764.jpg

不知道是什么原因。我已经重复操作很多次了。都是这个情况。不知道是不是我的服务器性能太低了?(1核1G)

0
0

Michael_PK

2018-06-13

HDFS有问题,你看下磁盘空间还有吗?建议把那句错误信息到搜索引擎上搜索下或者问答区里搜下,这个问题问答区应该有

0
0

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程