第二种方式使用StructType的方式也显示的指定了列名和类型相当于也需要知道列和类型,没明白两者的应用场景

来源:6-7 -DataFrame与RDD互操作方式二

Coley_5

2017-08-31

写回答

2回答

庄谷

2018-08-15

这个地方我也没搞明白。如果是按照PPT里讲的,意思应该是虽然不知道列名和类型,但是可以推导出来。

0
1
Michael_PK
推导是有前提的:json或者parquet之类的,不是所有的都能推导出来,你试想下,给你一个普通文本,能推导出来什么呢
2018-08-15
共1条回复

Michael_PK

2017-08-31

第二种字段个数无所谓了,在开发中你想咋定义就咋定义

0
6
Michael_PK
回复
慕桂英1146026
这个理解是OK的,其实在spark高版本中已经没有这个字段个数限制的问题了
2018-12-03
共6条回复

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程