Java中的多節點併發性

Question

我編寫了一個多線程Java程序來解決一個令人尷尬的並行問題，以至於它利用了多核CPU上的所有空閒CPU週期。我想重構我的解決方案，以便它可以在多個節點上運行，同時仍保留大部分我已經編寫的代碼。

我在過去曾經使用MPI和C，並被告知它是解決CPU週期最大化問題的「正確」方式，但我也意識到Java中的其他併發框架（如RMI），並且想知道是否他們同樣好。

是否有一種很好的方法來處理Java中的多節點和多核併發性，其主要目標是儘可能多地利用羣集中的CPU週期？

編輯：我覺得沒有簡單的方法來處理這些東西。我並不感到驚訝，但我希望。 :)

Answer 1

JMS是一個很好的開始。

Answer 2

您可以試試Hazelcast。它有一個分佈式ExecutorService。這應該允許您將任務添加到在任意數量的節點上運行的服務。

Answer 3

取決於你在做什麼，你的預算，你可能想看看（排名不分先後）

• Actors尤其Akka具有良好遠程演員，STM和監督者風格同治與Java API
• Norbert
• GridGain
• Terracotta
• Gigaspaces
• Oracle Coherence
• IBM Extreme Scale
• TIBCO ActiveSpaces

另見：

• java util concurrent和guava（Presentation slides focusing on util.concurrent）（EventBus）
• 庫如javolution或JSR 166
• Functional programming有能力的JVM語言，如Scala和Clojure比Java有更好的多核心利用率。
• RXJava（爪哇的Clojure，斯卡拉...反應的一些推廣）

Answer 4

還要考慮Apache Hadoop，它採用MapReduce和是非常適合許多並行的解決方案。