有了Spark，还需要Sqoop吗？

首页课程实战体系课手记专栏慕课教程

有了Spark，还需要Sqoop吗？

来源：7-8 -Hive和MySQL综合使用

Surperme

2019-10-06

Spark SQL 拥有了外部数据源API，可以加载Hive Mysql等外部数据，例如7-8所讲的内容；那么有了Spark，还需要Sqoop吗？

写回答

1回答

Surperme

Surperme

提问者

2019-10-06

如果从mysql转数据到hive中，是不是数据量达到一定规模，还是需要用到sqoop？

0

2

Surperme

回复

Michael_PK

谢谢！

2019-10-06

共2条回复

以慕课网日志分析为例进入大数据Spark SQL的世界

快速转型大数据：Hadoop，Hive，SparkSQL步步为赢

1644 学习 · 1129 问题

相似问题

老师，Spark可以直接读取HDFS文件，那么还需要Hive吗？

回答 1

本地需要安装spark环境么？

回答 1

请问，为什么spark-sql里show tables有表，spark-submit提交job里没有表？

回答 1

spark sql 中可以创建表吧，我想问的是这些数据都存储在内存中了吗？

回答 2

请教老师要插入大量的数据到mysql 也可以这样操作吗？数据量大还是需要用sqoop？

回答 1

打开慕课网App查看更多内容