NoSuchMethodException：RDDMultipleTextOutpu tFormat。 <init>（），而在Apache的星火使用MultipleTextOutputFormat

Question

我試圖利用MultipleTextOutputFormat的寫在自定義的方式中的數據，這裏要說的是，我指的是例如：https://stackoverflow.com/a/26051042/2485454

不過，我得到一個錯誤

了java.lang.RuntimeException：java.lang.NoSuchMethodException： $ $$ IWC IWC $$ IWC $$ IWC $$ IWC $$ IWC $$ IWC $$ IWC $ RDDMultipleTextOutpu上面的代碼執行後tFormat。（）

Answer 1

沒有一個項目就不可能完全診斷這個，但是當你遇到NoSuchMethodException時，你可以確定這個問題是編譯時與運行時間依賴衝突。也許你正在使用一個引入不匹配spark或hadoop庫的庫。或者，也許你只是針對不同的Spark版本進行編譯。

嘗試刪除所有額外的庫和/或在純火花REPL中運行代碼並從那裏進行備份。