老师,我下载的数据beijing.txt是有年份的,这个对吗,还有,我并没有把数据读取出来啊,怎么办?

来源:6-2 实战统计汇总

陈素素

2018-10-04

val conf = new SparkConf().setAppName(this.getClass.getSimpleName).setMaster(“local[*]”)
val sc = new SparkContext(conf)

val txt = sc.textFile("G:/myself/spark学习/coding-271-master/coding-271/ch4/beijing.txt")
import org.apache.spark.mllib.{stat , linalg}
val data = txt.flatMap(_.split(",")).map(value => linalg.Vectors.dense(value.toDouble))
println(data)
这段代码的运行结果里面没有数据啊,怎么办?
写回答

1回答

Wotchin

2018-10-05

数据读取不出来嘛?什么执行现象,抛异常了吗?把文件拷到工程目录中,用相对路径试一下,txt.foreach(println)看看有没有结果~

0
1
陈素素
谢谢老师,用您说的这个办法读取出来了
2018-10-05
共1条回复

掌握Spark机器学习库 大数据开发技能更进一步

案例+原理+代码 提升大数据处理能力

476 学习 · 81 问题

查看课程