cluster-computing

1熱度

1回答

如何爲每個任務設置1 gpu的slurm/salloc，但讓工作使用多個gpus？

我們正在尋找與slurm salloc GPU分配一些意見。目前，給定： % salloc -n 4 -c 2 -gres=gpu:1 % srun env | grep CUDA CUDA_VISIBLE_DEVICES=0 CUDA_VISIBLE_DEVICES=0 CUDA_VISIBLE_DEVICES=0 CUDA_VISIBLE_DEVICES=0 但是，我們希望不僅僅

1熱度

1回答

socketError：權限被拒絕

我試圖通過android代碼連接到hdfs集羣，但我面臨着socketError中的問題。下面我包括日誌文件和代碼。連接正在正確建立，但在創建連接套接字時出現問題。 Connect_Ssh: DllDate: Aug 30 2017 ChilkatVersion: 9.5.0.69 UnlockPrefix: Anything for 30-day trial Architecture:

1熱度

1回答

奇數如何解決分佈式系統中的裂腦問題？

分佈式系統建議使用奇數個主節點，如3個主節點或5個主節點以避免腦裂問題。但是它是如何解決這個問題的？如果有2個節點（A和B），1個主持人，如果A和B告訴主持人說：「我是大師」，那麼大腦發生分裂。主持人不能決定哪一個是主人。如果有3個節點（A，B和C），那麼，如果2個節點說Master是A，則主持人可以決定A是母版。但如果死了，然後主持人不得不從B和C中選擇一個主會發生什麼，如果B和C分不清

0熱度

1回答

沒有Kerberized卡夫卡經紀人連接到Kerberized Zookeeper

我找不到任何關於這個問題的信息，所以我會很高興，如果有人可以幫助我這一點。我有一個服務，如一個Kerberos的集羣 HBase的，MapReduce的，HDFS，動物園管理員 ......所有采用Kerberos和工作。讓我們想象一下我要添加一些卡夫卡經紀人集羣，但我不想Kerberize卡夫卡，因爲睾丸一槍讓我覺得比Kerberos的卡夫卡的想法更好。我不知道我是否錯過了某些參數....

0熱度

1回答

如何在jgroup replicated hashmap中給狀態轉移超時？

如何在Jgroup集羣中指定狀態傳輸超時？ public static ReplicatedHashMap<Integer, BaseSeatLayout> _baseSeatLayoutCache; JChannel baseRouteCache = new JChannel(props); baseRouteCache.connect("Master-Cluster"); client.

0熱度

1回答

確保使用Hazelcast在數據中心之間進行復制

我有一個應用程序，它同時在的數據中心上部署了一個拉伸的Hazelcast集羣。這兩個數據中心通常都具有完整的功能，但有時，其中一個數據中心完全脫離網絡進行SDN升級。我打算實現的是以這樣一種方式配置集羣，即DC中的每個主分區至少有2備份 - 一個在另一個集羣中，另一個在當前集羣中。爲此，檢查文檔指向分區組的方向（http://docs.hazelcast.org/docs/2.3/manual

0熱度

1回答

紗線簇上的spark scala csv export

我有一個5個節點的簇，部署了YARN。 2個Namenodes和3個Datanodes。雖然我的代碼是在spark中提交的。我試圖將數據導出到csv，但是當我這樣做時，數據會被導出到2個datanodes，並且兩個導出文件夾中都會有不同的內容。一個會有_SUCCESS文件，另一個會有導出的csv（part- *）。我的應用程序結束了一個空白路徑，因爲有時具有_SUCCESS文件的節點和運行應用程序

0熱度

1回答

Web服務器使用tomee多個ejb服務器呼叫

我正在使用TomEE服務器，我想將我的ejb應用程序部署到多個實例並希望使用Web應用程序訪問它。我想在Web應用程序和ejb應用程序之間添加負載平衡器。我怎樣才能做到這一點。我已經有一個使用mod_jk的web應用程序多個實例的負載平衡器，但我需要在INITIALCONTEXT屬性文件中的某處配置此配置。附上我想要構建我的應用程序體系結構的照片。 architecture pic 我在這

0熱度

1回答

DRBD - 裂腦問題

使用帶有起搏器的2節點DRBD（v9.0）集羣。 STONITH已禁用。我已經重新啓動了我的節點2（它充當主節點）。然後重新啓動後，我無法登錄，並顯示發生了裂腦。我該如何避免這種情況？如果我啓用了STONITH，它會被修復嗎？如果兩個節點都寫入了一些數據會發生什麼？

0熱度

1回答

如何將janusgraph與現有的hadoop集羣進行整合

我是大數據新手，目前正努力將janusgraph整合到現有的hadoop集羣。你能告訴我怎麼做，或者請提供一個資源鏈接。