本地模式下的執行程序數量以及客戶端和集羣模式之間的差異

Question

我對Spark配置有一個非常簡單的問題，在本地模式下，執行程序的數量是1，因爲只有一個工作節點？

我的另一個問題是部署模式作爲客戶端還是集羣模式的區別？在客戶端模型中提到的文檔中，驅動程序在羣集外啓動，我無法獲得此聲明。

Answer 1

如果我沒有記錯，您會在本地模式下得到一個執行程序，如果沒有另行指定。

客戶端和集羣模式之間的區別主要在於驅動程序運行的位置。在客戶端模式下，它在部署作業的機器上運行。在集羣模式下，驅動程序將在集羣中的某個節點上運行。在客戶端模式下，無論驅動程序輸出到標準輸出和標準錯誤，您都可以輕鬆訪問。如果您有疑問，請使用客戶端模式。