想请问下老师，sparkSQL那门课的离线日志也是模拟产生的么，还是用其他什么方法获取的？如果是用其他方法产生的，方便讲一下么？

首页课程实战体系课手记专栏慕课教程

想请问下老师，sparkSQL那门课的离线日志也是模拟产生的么，还是用其他什么方法获取的？如果是用其他方法产生的，方便讲一下么？

来源：12-4 -Python日志产生器开发之产生访问url和ip信息

OliverChan

2018-08-28

写回答

1回答

Michael_PK

Michael_PK

2018-08-29

已采纳

日志是慕课网官方的访问日志

0

10

Michael_PK

回复

慕粉0909169327

对，那就是自己的格式的日志了

2018-09-07

共10条回复

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

相似问题

使用Flume采集Log4j产生的日志那节，如果将log4j.properties中rootLogger输出的日志级别改为DEBUG

回答 3

Spark Streaming 的日志

回答 1

老师我用sparkstreaming读topic数据保存到hdfs上的格式是parquet,但我还要保存他的schema这个改怎样去做

回答 1

创建 topic 时候指定zookeeper ，发送消息指定broker，消费的时候指定zookeeper，为什么？

回答 1

日志生成问题

回答 2

打开慕课网App查看更多内容