有沒有辦法通過Airflow ssh到服務器並運行PythonOperator
?我看起來像SSHExecuteOperator
,而不是執行一個bash命令執行一個python callable。如何在Airflow中SSH和運行PythonOperator
0
A
回答
0
你能告訴我如何正確配置的SSHHook在Web UI,當我用SSHExecuteOperator運行一個簡單的shell命令 ,我剛剛得到這個: airflow.exceptions.AirflowException:無法創建遠程溫度文件
0
其SSH隱私問題
- 轉到您的主機的SSH服務器並運行
ssh-keygen -t rsa
,然後按回車所有你會得到2 RSA files.copy該文件的氣流ENV的方式 - 並複製它的完整路徑
而就在下面添加從氣流UI
{"key_file": "/usr/local/airflow/.ssh/id_rsa.pub", "no_host_key_check": true}
重新編譯DAG的連接並運行它
相關問題
- 1. 如何將參數從pythonoperator任務傳遞到airflow中的simplehttpoperator任務dag?
- 2. 如何獲得airflow dag運行的JobID?
- 3. 使用Airflow運行.EXE和Powershell任務
- 4. 錯誤運行tox for airflow
- 5. 如何通過SH腳本運行ssh-agent和ssh-add?
- 6. 運行使用ssh和NAT
- 7. BashOperator不運行bash文件apache airflow
- 8. 如何在無需運行ssh-agent的情況下使用GitHub和SSH?
- 9. 如何使用AirFlow運行Python任務列表?
- 10. 如何將airflow調度器作爲守護進程運行?
- 11. 如何刪除XCOM對象,一旦DAG在Airflow中完成其運行
- 12. 如何通過ssh運行Java框架
- 13. 如何ssh然後運行命令?
- 14. Airflow Python運算符中的宏
- 15. 在.yml文件中運行SSH命令
- 16. 在ssh中運行Python Selenium webdriver
- 17. 如何在C#中的SSH服務器上運行命令?
- 18. 如何使用Net :: SSH :: Perl運行SSH命令?
- 19. 我們如何使用ssh模塊運行「ssh -keygen」命令
- 20. 運行ssh-host-config
- 21. 運行ls內SSH
- 22. 運行shell腳本的Airflow Dataproc運算符
- 23. Airflow的BranchPythonOperator如何工作?
- 24. 氣流:如何從不同的服務器SSH和運行BashOperator
- 25. 如何通過ssh和psql從bash變量運行SQL命令?
- 26. 自動化SSH和運行命令
- 27. 無法構建和運行ssh命令
- 28. SSH的別名和在Vagrant虛擬機中運行命令
- 29. 仍然無法與Airflow並行運行所有任務
- 30. 如何在註銷SSH後在後臺運行Python腳本?