5-4 sumbit过程中,提示找不到com.imooc.bigdata.spark.pk的方法

来源:5-4 shell封装Spark作业提交脚本

慕虎3523500

2020-01-19

图片描述

问题描述:按照PK老师的步骤一步一步的编写,目前代码没有问题,在本地可以运行,且数据可以顺利插入HBase。同样的tar.gz包,在centos中解压后,运行,就提示Exception in thread “main” java.lang.ClassNotFoundException: Failed to find data source: com.imooc.bigdata.spark.pk. Please find packages at http://spark.apache.org/third-party-projects.html。
查了一下午,一直不行,没找到哪里的原因。求助老师!!!

写回答

1回答

Michael_PK

2020-01-19

这个必须要使用我提供的spark版本才行

0
9
Michael_PK
回复
慕虎3523500
spark的课程用我提供的那个是能兼容其他课程的spark的,如果是我的课程,就保留一个就行了
2020-01-20
共9条回复

Spark进阶 大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

700 学习 · 190 问题

查看课程