sparkStreaming处理本地文件数据

来源:7-7 -案例实战之Spark Streaming处理文件系统数据

qq_MU晓龍_03575368

2017-12-17

你好,老师,我在windows7操作系统中用sparkstreaming处理本地文件数据,但是当我向目标文件夹添加文件的时候,并不能读取数据,请问在windows系统中监控本地文件需要配置其他东西吗?我看其他同学也问过这问题。http://img.mukewang.com/szimg/5a3664fb0001ac8d08610500.jpg

写回答

1回答

Michael_PK

2017-12-17

注意点:数据必须比作业启动晚放进去

0
4
Michael_PK
回复
qq_MU晓龍_03575368
你启动streaming作业后,再新创建一个文件移动到监控目录,只有这一个可能,没有其他可能
2017-12-17
共4条回复

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

查看课程