使用具有SparkR的Jupyter筆記本

Question

我想使用帶SparkR的Jupyter筆記本，我想在安裝在我的Spark羣集上的Jupyter上安裝IR內核。

我可以找到使用Jupyter與pySpark，但不是SparkR的幫助。

我在AWS-EMR集羣上創建了我的Spark集羣。

Answer 1

如果不是必須使用IRkernel，使用Jupyter星火你應該考慮安裝Apache Toree內核：https://toree.incubator.apache.org/

這個內核將允許你一個Jupyter筆記本使用任何星火原料藥星火連接。它還允許使用魔法（例如％pyspark或％sparkr）在單個筆記本的不同單元格之間切換語言。