HPC集羣極其緩慢

Question

我已經建立了一個具有1個頭節點和3個計算節點的小型集羣。我的客戶機是用於提交工作簿卸載作業的Windows 2016 Server。我的問題 - HPC非常緩慢;如果我在本地計算機上運行作業，則運行速度比HPC羣集上的速度快10倍左右！我節點的配置如下：

Headnode：2vCPU和8GB內存

計算節點：1vCPU和4GB內存的每個

我有一個可疑的問題可能是與節點之間的通信網絡。或者完全不同的東西。有人可以幫忙嗎？

提前致謝！

Answer 1

從我的HPC工作中來看：由於集羣內的互連（網絡交換機），我經歷了很多性能下降。這可能是因爲您的互連速度不夠快，無法真正利用硬件。由於數據必須傳送到其他節點，因此緩慢互連會阻礙您的速度/性能。目前，大多數HPC系統都具有某種特殊的網絡互連，其速度非常快（通常爲infiniband），允許節點快速向對方發送數據。我建議你檢查一下你的網絡交換機，並確保它不低於1千兆位以太網速度。

這裏是我的出版物之一的鏈接：https://www.raspberrypi.org/magpi/benchmarking-raspberry-pi-cluster/

接近年底，你可以看到低以太網帶寬如何阻礙了我的集羣的性能。