spark.read().textFile("D:\\behavior.csv").toJavaRDD(); 时报错

来源:13-8 als算法实现(中)

viwq

2020-03-23

Exception in thread “main” java.lang.NoClassDefFoundError: org/codehaus/commons/compiler/CompileException

写回答

2回答

agjsytt

2022-04-10

你遇到这问题吗,也是codehaus那个依赖相关的。

Exception in thread "main" java.lang.NoClassDefFoundError: org/codehaus/janino/InternalCompilerException

0
0

viwq

提问者

2020-03-23

已解决

<dependency>
       <groupId>org.apache.spark</groupId>
       <artifactId>spark-mllib_2.12</artifactId>
       <version>2.4.4</version>
       <exclusions>
           <exclusion>
               <groupId>com.google.guava</groupId>
               <artifactId>guava</artifactId>
           </exclusion>
           <exclusion>
               <groupId>org.codehaus.janino</groupId>
               <artifactId>janino</artifactId>
           </exclusion>
           <exclusion>
               <groupId>org.codehaus.janino</groupId>
               <artifactId>commons-compiler</artifactId>
           </exclusion>
       </exclusions>
   </dependency>
   <dependency>
       <groupId>com.google.guava</groupId>
       <artifactId>guava</artifactId>
       <version>14.0.1</version>
   </dependency>

   <dependency>
       <groupId>org.codehaus.janino</groupId>
       <artifactId>janino</artifactId>
       <version>3.0.8</version>
   </dependency>

   <dependency>
       <groupId>org.codehaus.janino</groupId>
       <artifactId>commons-compiler</artifactId>
       <version>3.0.8</version>
   </dependency>

</dependencies>

<dependencyManagement>
   <dependencies>
       <dependency>
           <groupId>org.codehaus.janino</groupId>
           <artifactId>commons-compiler</artifactId>
           <version>3.0.8</version>
       </dependency>
       <dependency>
           <groupId>org.codehaus.janino</groupId>
           <artifactId>janino</artifactId>
           <version>3.0.8</version>
       </dependency>
   </dependencies>


</dependencyManagement>

0
0

ES7+Spark 构建高匹配度搜索服务+千人千面推荐系统

ElasticSearch实现高相关性搜索,Spark MLlib实现个性化推荐

1385 学习 · 559 问题

查看课程