2016-12-15 91 views
1

IM使用EMR和想用jupyter(IPython中),所以我添加到集羣自舉操作: S3://elasticmapreduce.bootstrapactions/ipython-notebook/install-ipython-notebookAWS EMR jupyter密碼

我執行端口調諧從我的本地主機訪問jupyter,並且工作正常,但它要求輸入登錄密碼,嘗試空,嘗試hadoop,但沒有運氣,是否有任何機構知道jypyter密碼是什麼?

回答

0

當我使用相同的引導操作時,我遇到了這個問題。我試圖加入Args=[--password, jupyter],我也無法工作。這是從this AWS論壇:

Name='Install Jupyter notebook',Path="s3://aws-bigdata-blog/artifacts/aws-blog-emr-jupyter/install-jupyter-emr5.sh",Args=[--r,--julia,--toree,--torch,--ruby,--ds-packages,--ml-packages,--python-packages,'ggplot nilearn',--port,8880,--password,jupyter,--jupyterhub,--jupyterhub-port,8001,--cached-install,--notebook-dir,s3://<your-s3-bucket>/notebooks/,--copy-samples]

我所做的卻是遵循these instructions使用CLI在EMR實例都可以直接安裝蟒蛇。如果你遵循第一部分,你應該能夠啓動並運行。使用保存

  • 一旦有你要安裝使用超級用戶priveledges蟒蛇.pem文件

    • SSH連接到你的主人EMR例如:sudo wget http://repo.continuum.io/archive/Anaconda3-4.1.1-Linux-x86_64.sh總結在這裏。然後bash Anaconda3–4.1.1-Linux-x86_64.sh
    • 確保您使用python的蟒蛇版本:which python
    • 如果你沒有,指定源:source .bashrc
    • 現在做一個jupyter配置文件:jupyter notebook --generate-config
    • 光盤放入jupyter文件夾:cd ~/.jupyter/
    • 更新配置文件:vi jupyter_notebook_config.py
    • 在config文件中添加下列行:

      c = get_config() c.NotebookApp.ip = '*' c.NotebookApp.open_browser = False c.NotebookApp.port = 6789 < ---選擇你想要

    • 出口取其口出來的配置編輯器,並通過運行jupyter:jupyter notebook

    • 這應該運行不活躍的內核筆記本電腦(現在)。但它會給你你想要的令牌:http://localhost:6789/?token=xxxxxx

    • 離開這個運行,並打開一個新的終端窗口。現在,您需要通過此aws blog post(使端口與您在配置文件中指定的端口相同)隧道到EMR實例。 ssh -o ServerAliveInterval=10 -i <<credentials.pem>> -N -L 8192:<<master-public-dns-name>>:8192 [email protected]<<master-public-dns-name>>

    • 在瀏覽器中打開localhost:6789會提示您用jupyter頁面輸入您的密碼或令牌。輸入在上述步驟中生成的令牌,並且您應該很好。

    希望這有助於!可能有一個不太複雜的方式,但這是最終爲我工作的結果。

  • +0

    我跟着[第二條路徑](https://medium.com/@josemarcialportilla/getting-spark-python-and-jupyter-notebook-running-on-amazon-ec2-dec599e1c297),並已能夠訪問jupyter筆記本電腦,但這是一個獨立的EC2機器,不在羣集上。同樣的方法可以在集羣上工作嗎?我必須將它安裝在所有節點上嗎?那會很笨拙。爲[第一個路徑](https://aws.amazon.com/blogs/big-data/running-jupyter-notebook-and-jupyterhub-on-amazon-emr/),我不知道怎麼去到筆記本電腦全部只有ju​​pyter樞紐 – Calcutta