Q

我可以獨立運行火花而不使用oozie嗎？

2017-10-04 84 views -1 likes

-1

我已經安裝了oozie，並且可以在oozie工作流上運行spark工作？我可以獨立運行oozie bundle中的spark庫，而不直接使用oozie。我該怎麼做？請用一個例子來解釋。我可以獨立運行火花而不使用oozie嗎？

2017-10-04 dark_shadow

A

回答

3

您可以使用spark-submit在spark-shell中提交作業。檢查下面的火花文檔。

https://spark.apache.org/docs/latest/submitting-applications.html#launching-applications-with-spark-submit

2017-10-04 08:32:02 alexgids

+0

我還沒有安裝的火花，但已經安裝了Oozie這讓我使用它的工作流程運行火花的工作。我想在不使用oozie-workflow的情況下運行spark。 –

+0

我在任何oozie的子文件夾中都找不到spark-submit文件。那麼我怎麼能運行它。 –

+0

@dark_shadow據我所知Oozie是一個工作流程自動化工具。它不能獨立運行火花作業。 – alexgids

相關問題