编译spark之前需要先安装hadoop 和 其他软件吗?

来源:3-3 补录:Spark源码编译中的坑

慕仙4974986

2018-12-13

编译spark之前需要先安装hadoop软件和其他软件吗?比如你要继承flume的话,就要先安装flume这个软件?

编译语句:
./dev/make-distribution.sh --name hadoop2.6 --tgz -Phadoop-2.6 -Phive -Phive-thriftserver -Dhadoop.version=2.6.5 -U -X

报错:

图片描述

写回答

1回答

Michael_PK

2018-12-13

不需要安装你说的那些。这种场景建议编译的机器上的无关进程都kill掉,再重试,无外乎当时的网络下载不到需要的资源

0
2
Michael_PK
回复
慕仙4974986
欧冠呢,睡啥觉,哈哈哈
2018-12-13
共2条回复

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程