什麼是內存？*。內存屬性控制 - 內存或磁盤？

Question

可以設置spark.driver.memoryspark.executor.memory和被描述爲如下：

spark.driver.memory 1g Amount of memory to use for the driver process 

spark.executor.memory 1g Amount of memory to use per executor process (e.g. 2g, 8g). 

上述配置存儲器說。那麼它是RAM內存還是磁盤？

Answer 1

（我必須承認這是一個非常有趣的問題）

不久，它的RAM（和誠實星火不支持磁盤作爲一種資源來接受來自集羣管理器/請求）。

從官方文檔Application Properties：

的內存量要用於驅動過程中，即，其中SparkContext被初始化。 （例如1g，2g）。

注意：在客戶端模式下，不能通過應用程序中的SparkConf直接設置此配置，因爲此時驅動程序JVM已經啓動。相反，請通過--driver-memory命令行選項或在您的默認屬性文件中進行設置。