Spark Scala - TokenizerExample - Intellij錯誤

Question

我正在編譯與Spark-Scala包一起編譯'TokenizerExample'時遇到問題。

我有我的設置環境的IntelliJ，我能夠成功編譯其他火花Scala的例子，如NaiveBayes，餘弦相似性等

但是當我加載「TokenizerExample」成的IntelliJ IDE，系統將顯示錯誤在下面的說明行「無法解析這樣的特徵參考變換」消息：

val tokenized = tokenizer.transform(sentenceDataFrame) 

val regexTokenized = regexTokenizer.transform(sentenceDataFrame) 

我沒有做任何編輯，我可以觀察到的問題是與變換方法。你能幫我解決這個問題嗎？感謝您的支持。

謝謝！

Answer 1

SBT/Maven，請確保您擁有mllib模塊的.sbt或pom.xml文件中列出的所有依賴項並重建。我個人並沒有在mllib上工作，但如果我們不能很好地解決依賴問題，這種錯誤就會顯現出來。謝謝。