channel问题

来源:4-21 面试题谈谈你对Flume高可用的看法(重要)

慕九州3016327

2020-12-05

老师我有个疑问当hdfs挂掉,数据都堆积在第二层的channel里面,说明需要分配很大的空间给第二层的channel,如果磁盘空间不足,导致channel写不进去覆盖数据或者挂掉,数据丢失,会不会有这种情况呢

写回答

1回答

Michael_PK

2020-12-05

有可能,但是只要监控到位,磁盘空间不太可能会被干满的,收到告警就需要去处理

1
1
慕九州3016327
非常感谢!
2020-12-06
共1条回复

Spark3实时处理-Streaming+StructuredStreaming实战

实战Spark3实时处理,掌握两套企业级处理方案

340 学习 · 238 问题

查看课程