老师您好， flume在生产上面， source的type用的exec多吗？会不会不稳定

首页课程实战体系课手记专栏慕课教程

老师您好， flume在生产上面， source的type用的exec多吗？会不会不稳定

来源：12-9 -使用Flume实时收集日志信息

hahaimooc

2017-11-23

老师您好，我想问两个问题：

flume在生产上面， source的type用的exec多吗？会不会不稳定
对于有些日志，比如hdfs本身的日志，是每200M分割成一个文件，那么这种日志用flume怎么收集？

多谢老师啦

写回答

1回答

Michael_PK

Michael_PK

2017-11-23

已采纳

1:exec的不少，spooling的也不少。2:flume可以按照指定时间或者大小进行收集，和日志数据源并没有太大关系

1

1

hahaimooc

非常感谢！

2017-11-23

共1条回复

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

相似问题

使用flume采集log4j日志，flume把一条日志当做一个event，怎么做到把多行日志（例如error日志）当做一个event处理

回答 2

请教老师用Flume采集线上nginx的日志那Flume是不是也要安装到同nginx的服务器上？

回答 1

使用Flume采集Log4j产生的日志那节，如果将log4j.properties中rootLogger输出的日志级别改为DEBUG

回答 3

使用exec启动flume时启动到一半就终止了

回答 1

老师,你好,通过学习课程进行实际生产的使用,但是出现以下问题

回答 1

打开慕课网App查看更多内容