不能在星火保存PipelineModel決策樹

Question

雖然試圖保存來自於管道的一個估計的模型管道 - 決策樹 - 我有這樣的錯誤：

Exception in thread "main" java.lang.UnsupportedOperationException: Pipeline write will fail on this Pipeline because it contains a stage which does not implement Writable. Non-Writable stage: dtc_c13531497173 of type class org.apache.spark.ml.classification.DecisionTreeClassificationModel 

我已經對其他估算人員看到類似問題，您是否知道對此有任何修復？

謝謝

Answer 1

這不是一個錯誤。如果PipelineModel包含不執行MLWritable的階段，這是正常行爲。

如何解決？將您的Spark安裝更新至2.0+。見SPARK-11888