0
基本上我需要做的是將CTBNCToolkit與Apache Spark集成，因此該工具箱可以利用Apache Spark的併發和集羣功能。將任意Java機器學習與Apache Spark集成
總的來說，我想知道的是有由Apache Spark開發者接觸到任何Java/Scala庫的方式，機器學習庫可以在星火的併發管理上運行集成任何方式？
所以我們的目標是讓獨立機器學習庫更加快速併發。
A
回答
0
不，這是不可能的。
所以你想要的是任何算法在Spark上運行。但是，爲了平行工作，Spark使用RDD或Dataset。所以爲了同時運行你的任務，算法將不得不使用這些類。
你可以嘗試的唯一事情就是編寫你自己的Spark程序，它使用任何其他庫。但我不確定你的情況是否可行。但是，Spark ML對你來說還不夠嗎？
相關問題
- 1. 作爲大型機器學習平臺的Apache Flink vs Apache Spark？
- 2. 如何將機器學習與Web應用程序集成？
- 3. 深度學習與機器學習
- 4. 如何連接Azure機器學習和Spark Streaming或Apache Storm
- 5. Apache Spark：多機器學習的並行化算法
- 6. Apache Spark和機器學習 - 在生產中使用
- 7. Kafka Streaming + Spark Streaming +機器學習
- 8. Spark機器學習AST比較
- 9. 學習Java Swing（GUI生成器與否？）
- 10. 使用Apache Mahout機器學習庫
- 11. 機器學習，Python
- 12. 機器學習在Python：scikit學習/ Pybrain
- 13. 機器學習的挑戰：在Java/Groovy中（數據挖掘，機器學習）
- 14. apache spark流kafka集成錯誤JAVA
- 15. python中的機器學習外部數據集學習
- 16. 問題與機器學習scikit在Python學習
- 17. 此任務的機器學習算法？
- 18. Azure的機器學習 - 從數據集
- 19. 醫療機器學習數據集
- 20. 機器學習分類集合
- 21. Python監督機器學習
- 22. Logstash或Elasticsearch與Apache Spark流的集成
- 23. 機器學習udacity
- 24. Python機器學習準確性評分與意見
- 25. ALS機器學習算法在Apache Spark Mllib中的等級是什麼
- 26. Apache spark mllib.linalg向量和spark.util向量之間的區別機器學習
- 27. 學習Apache Ofbiz？
- 28. 學習Apache POI
- 29. GATE中的機器學習
- 30. 機器學習代碼生成
感謝您的回覆。 「不過，Spark ML對你來說不夠嗎？」其實我看不到Spark ML提供任何CTBNC算法。連續時間貝葉斯網絡分類器 – ehsun7b