0
假設兩個腳本都針對同一個Spark羣集運行,是否有方法在R和Scala腳本之間共享數據?例如,我想使用Scala從源系統中獲取數據,並且我想在R中訪問這些數據,而不必保存它。跨R和Scala腳本訪問數據
我試過使用registerTempTable來保存數據在內存中,但我似乎無法在另一個腳本中訪問它。
假設兩個腳本都針對同一個Spark羣集運行,是否有方法在R和Scala腳本之間共享數據?例如,我想使用Scala從源系統中獲取數據,並且我想在R中訪問這些數據,而不必保存它。跨R和Scala腳本訪問數據
我試過使用registerTempTable來保存數據在內存中,但我似乎無法在另一個腳本中訪問它。
沒有辦法做到這一點(在任何會話之間)。您應該將數據寫入磁盤。 (hdfs等)