JVM（令人尷尬的）並行處理庫/工具

Question

我正在尋找一些東西，這將使它很容易在羣集上運行（正確編碼）令人尷尬的並行JVM代碼（以便我可以使用Clojure + Incanter）。

我已經使用並行Python過去做到這一點。我們有一個新的PBS集羣，我們的管理員很快就會設置使用PBS作爲後端的IPython節點。這兩個系統使得在集羣中運行某些類型的代碼幾乎毫不費力。

我在過去使用過Hadoop的錯誤（Hadoop不適合我使用的數據類型） - 即使是小運行的延遲也會持續1-2分鐘。

JPPF或Gridgain更適合我需要的東西嗎？這裏有人有任何經驗嗎？還有什麼可以推薦的嗎？

Answer 1

。

Answer 2

看Skandium

編輯：

上面的鏈接是沒有更多的活，所以加入Clojure是報告給Terracotta工作，但有一些補丁GitHub的鏈接

https://github.com/mleyton/Skandium

Answer 3

退房cascalog - http://github.com/nathanmarz/cascalog

Answer 4

我建議你看看Skandium，以GPL替代許可可根據要求開發商進行協商。