关于数据采集的问题

来源：9-8 -数据清洗之日志解析

慕仙4974986

2018-11-02

Flume，假如日志文件只有一个，第一次统计完成后，下次统计时，我希望flume只采集新增的日志数据可以吗？如果是多个日志文件，我希望Flume采集的是新创建的日志文件，可以吗？Flume能做到吗？

写回答

1回答

Michael_PK

2018-11-02

已采纳

1）Flume，假如日志文件只有一个，第一次统计完成后，下次统计时，我希望flume只采集新增的日志数据可以吗？回答：可以

2）如果是多个日志文件，我希望Flume采集的是新创建的日志文件，可以吗？回答：可以

3）Flume能做到吗？回答：可以

慕仙4974986

非常感谢！谢谢

2018-11-02

共1条回复

以慕课网日志分析为例进入大数据Spark SQL的世界

快速转型大数据：Hadoop，Hive，SparkSQL步步为赢

1644 学习 · 1129 问题

相似问题

回答 2

回答 2

回答 1

回答 1

回答 2