Spark Streaming 的日志

来源:8-3 -实战之将统计结果写入到MySQL数据库中

Stefan章晓风

2020-10-12

老师您好,现在我想学习用nohup 后台跑spark-submit 的任务,刚开始是正常的,jps也能看到,但是开了一会以后自己退出了,看不到错误的信息,请问这个日志是输出到哪里了呢?那个 nohup.out 是空的…

写回答

1回答

Michael_PK

2020-10-12

你这么测试,一个脚本里面echo东西的,你用nohup启动,将日志输出到一个文件中。这么做的目的是确定你的启动脚本写的对不对。

你是虚拟机吗,有可能是资源太少被干掉了。当然最好是根据上面的思路明确找到日志

0
5
Michael_PK
回复
Stefan章晓风
还有没有其他信息,这个看不出来具体是什么问题
2020-10-13
共5条回复

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

查看课程