presto与spark sql的关系

来源:11-1 课程目录

程研板

2021-04-05

现在presto,impala等查询引擎可直接访问hdfs,而不用经过rdd,原因是impala这种查询引擎,自带了类似于spark core的计算引擎吗?就是impala与spark sql➕spark core这两个东西合起来是并列关系吗?

写回答

1回答

Michael_PK

2021-04-05

Presto、Impala、SparkSQL都是属于SQL on Hadoop的解决方案。

这些框架都是有对应的元数据管理部分,也就是说都具备schema信息的,只要schema与文件系统上的数据对应上,那都有各自的引擎来进行分析的。



0
4
Michael_PK
回复
程研板
下周。。。。
2021-05-11
共4条回复

SparkSQL入门 整合Kudu实现广告业务数据分析

大数据工程师干货课程 带你从入门到实战掌握SparkSQL

535 学习 · 192 问题

查看课程