日志分析业务通用解决方案是啥？

来源：1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）

燃着的半支烟

2022-08-15

老师您好，咨询下，如果我现在要采集用户请求日志，然后做分析。这样的场景，业内通用的解决方案和流程是什么样的？
我看了老师的几门课程，涉及到了多种技术方案，但是我自己不知道该怎么选择，麻烦老师指点下。

写回答

1回答

Michael_PK

2022-08-16

首先：用户行为日志等类似的日志分析在工作中是占比最多的一种

其次：解决方案并不是一劳永逸的，每个公司，甚至相同公司的不同团队，可能采用的框架都不一样的

再次：如果说通用，那基本上就是，日志采集到HDFS中，然后通过清洗，落入数仓，然后再一层层的进行统计分析到出结果。这中间采用的框架也可能是多种多样的。

Spark进阶大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

700 学习 · 190 问题

相似问题

回答 1

回答 1

回答 2

回答 2

回答 3