是否可以將訓練有素的Spark ML模型或交叉驗證器保存到postgree數據庫中？

Question

是否可以將訓練有素的Spark ML模型或交叉驗證器保存到postgree數據庫中？我可以找到將其保存到磁盤或HDFS的方法，但是我們可以將它保存在RDBMS（例如Postgree）表中嗎？

Answer 1

總的來說不是。 ML模型使用Parquet文件存儲模型，元數據和可選數據的特定結構。可以創建可以在關係數據庫中存儲相同數據的包裝器，但此時Spark中沒有這種功能。

對於型號您可以將某些子集：使用Java序列化

• 序列化模型。
• 將保存的模型存儲爲大型對象。

這僅限於非分佈式模型。