spark本地编译失败

来源:9-8 -Spark环境搭建及wordcount案例实现

apodemakeles

2017-10-12

在执行到Building Spark Project YARN Shuffle Service 这一步失败,出现了很多编译错误类似:错误: 程序包org.apache.hadoop.yarn.api.records不存在

scala版本2.12.3,hadoop是 2.6.0-cdh5.12.0, spark 2.1.0

没思路,看似是版本不兼容引起编译错误?

请问实战提供的基于cdh5.7的spark包能否用在我的cdh5.12上? 

写回答

1回答

Michael_PK

2017-10-12

spark环境编译在spark课程中有详细的讲解,你也可以参考下我的一个手记,描述了编译过程

0
1
apodemakeles
问之前已经参考了,不行,我干脆改成cdh7
2017-10-12
共1条回复

10小时入门大数据

【毕设】大数据零基础入门必备,轻松掌握Hadoop开发核心技能

1456 学习 · 656 问题

查看课程