datanode频繁出现dead状态

来源：1-1 课程介绍

侧耳倾听17

2022-01-25

图片描述
老师您好目前datanode频繁出现dead状态，这是报错日志，DataXceiver error processing WRITE_BLOCK operation ，使用下图的方法修改了参数，同样的问题和报错依然会产生。

写回答

1回答

Michael_PK

2022-01-26

已采纳

1）你的机器是什么配置？ core memory disk多少

2）报错的图上有个gc的错，看起来象是内存不够了

Michael_PK

侧耳倾听17

另外一个帖子回复了。还有一个问题，你集群的小文件会不会过多了？在hdfs ui界面上有，如果小文件过多，也会导致连接超时或者中断

2022-02-07

共2条回复

Spark进阶大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

700 学习 · 190 问题

相似问题

回答 2

回答 1

回答 2

回答 1

回答 4