NoClassDefFoundError當運行mahout spark-items相似性

我是新手mahout，並希望運行命令「mahout spark-itemsimilarity」根據此頁intro-coocurrence-spark。但是，我得到以下錯誤，我GOOGLE了很多，但仍然沒有涉及到這一點？NoClassDefFoundError當運行mahout spark-items相似性

./bin/mahout spark-itemsimilarity 
Error: A JNI error has occurred, please check your installation and try again 
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/SparkConf 
    at java.lang.Class.getDeclaredMethods0(Native Method) 
    at java.lang.Class.privateGetDeclaredMethods(Class.java:2701) 
    at java.lang.Class.privateGetMethodRecursive(Class.java:3048) 
    at java.lang.Class.getMethod0(Class.java:3018) 
    at java.lang.Class.getMethod(Class.java:1784) 
    at sun.launcher.LauncherHelper.validateMainClass(LauncherHelper.java:544) 
    at sun.launcher.LauncherHelper.checkAndLoadMain(LauncherHelper.java:526) 
Caused by: java.lang.ClassNotFoundException: org.apache.spark.SparkConf 
    at java.net.URLClassLoader.findClass(URLClassLoader.java:381) 
    at java.lang.ClassLoader.loadClass(ClassLoader.java:424) 
    at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:331) 
    at java.lang.ClassLoader.loadClass(ClassLoader.java:357) 
    ... 7 more

我使用Ubuntu並設置了JAVA_HOME，MAHOUT_HOME，SPARK_HOME。我還應該做什麼？

來源

2017-03-15 bojan

忘記提及我使用的版本，mahout 0.12.2，Hadoop 2.7.3 – bojan

您使用的是什麼版本的Spark？ – rawkintrevo

這看起來像一個Spark設置問題，因爲Spark尋找的第一件事情是SparkConf。您是否可以運行任何Spark演示應用程序或Spark Scala外殼？ – pferrel

運行命令「mahout spark-itemsimilarity」後，我也得到了這個錯誤。

我設法通過恢復SPARK_HOME指向的目錄中的spark-1.6.3-bin-hadoop2.4來擺脫此錯誤。

嘗試這種方法的想法是由於閱讀Mahout目錄中README.md的「從源代碼構建」部分導致的，因爲我使用了預先構建的Mahout二進制文件，所以我之前沒有閱讀該目錄。

來源

2017-05-14 17:39:33

NoClassDefFoundError當運行mahout spark-items相似性

回答

相關問題