Apache toree - pySpark無法加載軟件包

Question

我按照https://medium.com/@faizanahemad/machine-learning-with-jupyter-using-scala-spark-and-python-the-setup-62d05b0c7f56的說明安裝了Apache Toree。

但是我不管理通過使用PYTHONPATH變量在內核文件導入在pySpark內核軟件包：

/usr/local/share/jupyter/kernels/apache_toree_pyspark/kernel.json。

使用筆記本我可以在sys.path和os.environ ['PYTHONPATH']中看到所需的.zip，相關的.jar位於os.environ ['SPARK_CLASSPATH']，但I獲取

「導入圖形框架時沒有名爲graphframe的模塊」：import graphframe。

有關如何導入圖框的任何建議？

謝謝。

Answer 1

我在數據框的下載頁面中使用了.zip，但沒有解決問題。正確的.zip文件可以按照步驟來創建：

https://github.com/graphframes/graphframes/issues/172

另一種解決方案，在給定：Importing PySpark packages，雖然--packages參數並沒有爲我工作。

希望得到這個幫助。