spark sql 中可以创建表吧，我想问的是这些数据都存储在内存中了吗？

来源：4-3 -SQL on Hadoop常用框架介绍

慕仙4974986

2018-12-13

spark sql 中可以创建表吧，我想问的是这些表数据都存储在内存中了吗？
那根据我的理解，park sql是一个分布式的内存数据库了对吧？跟redis有部分相似，都是基于内存的，分布式的。只是park sql更强大一些，可以做些分布式的运算。支持多数据源。对吗？

写回答

2回答

Michael_PK

2018-12-13

spark SQL是分布式内存数据库，这句话官网哪里有体现？spark SQL开篇就说了它是一个处理结构化数据的框架

Michael_PK

2018-12-13

存在元数据库里啊。。。。。咋感觉你越学越偏了，还记得hivesite吗？

Michael_PK

你的那句话：spark是构建在hadoop之上的话，也不知道你哪里看来的，建议多看看官网吧。常识性错误太多

2018-12-14

共8条回复

以慕课网日志分析为例进入大数据Spark SQL的世界

快速转型大数据：Hadoop，Hive，SparkSQL步步为赢

1644 学习 · 1129 问题

相似问题

回答 1

回答 2

回答 1

回答 1

回答 3