2010-08-29 86 views
0

我是Linux,Java和Hadoop的全新產品。我創建了一個實現Tool接口的簡單MapReduce驅動程序。但是當我嘗試在Eclipse中運行作業時,在run()方法被調用之前,我得到了一個N​​oClassDefFoundError。Hadoop ToolRunner因NoClassDefFoundError失敗

我在Ubuntu 10.04 LTS上運行Hadoop 0.20.2。下面提供了源代碼和堆棧跟蹤。任何援助將不勝感激。

謝謝, 戴夫

進口org.apache.hadoop.conf *。

import org.apache.hadoop.fs.Path;

import org.apache.hadoop.io。*;

import org.apache.hadoop.mapreduce。*;

import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;

import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;

import org.apache.hadoop.util。*;

公共類MyTestDriver擴展配置的實現工具{

@Override 
public int run(String[] args) throws Exception { 

    if (args.length != 2) { 
     System.err.printf("Usage: %s [generic options] <input> <output>\n", 
      getClass().getSimpleName()); 
     ToolRunner.printGenericCommandUsage(System.err); 
     return -1; 
    } 

    // Code here to submit Hadoop Job ... 
    return 0; 
} 

/** 
* @param args 
*/ 
public static void main(String[] args) throws Exception { 
    int exitCode = ToolRunner.run(new MyTestDriver(), args); 
    System.exit(exitCode); 
} 

}

異常在線程 「主要」 java.lang.NoClassDefFoundError:在org.apache組織/阿帕奇/公/ CLI/ParseException的 .hadoop.util.ToolRunner.run(ToolRunner.java:59) at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:79) at MaxTemperatureDriver.main(MaxTemperatureDriver.java:44) 由:java.lang.ClassNotFoundException:org.apache.commons.cli.Par seException 在java.net.URLClassLoader的$ 1.run(URLClassLoader.java:202) 在java.security.AccessController.doPrivileged(本機方法) 在java.net.URLClassLoader.findClass(URLClassLoader.java:190) 是java .lang.ClassLoader.loadClass(ClassLoader.java:307) at sun.misc.Launcher $ AppClassLoader.loadClass(Launcher.java:301) at java.lang.ClassLoader.loadClass(ClassLoader.java:248) .. 。3更多

+0

有一個答案張貼在這裏:http://stackoverflow.com/questions/6890087/problem-with-libjars-in-hadoop – 2013-11-06 03:23:11

回答

1

Hadoop的所有依賴項都在Eclipse構建路徑中嗎?確保hadoop/lib目錄中的所有jar都在您的構建路徑中。

0

該錯誤表示存在未找到的特定類。類存儲在.jar文件中。所以,你需要檢查是否所有需要的jar文件都可用。 Jar文件基於CLASSPATH變量進行搜索。如果您使用Eclipse作爲開發環境,請檢查構建依賴關係是否滿足(您可以通過右鍵單擊您的項目 - >配置構建路徑 - >添加外部jar)來完成此操作。

另外,如果您不能確定類缺少它們,您可以檢查類名(Hadoop是開源的,所以你可以找到類的名稱),然後搜索類名findjar