oozie

    0熱度

    1回答

    當我試圖運行Oozie的工作它拋出以下錯誤 Launcher ERROR, reason: Main class [org.apache.oozie.action.hadoop.ShellMain], exit code [1] 我的殼腳本獨立運行時運行良好。 job.properties nameNode=hdfs://ns613.mycyberhosting.com:54310 jobTra

    0熱度

    2回答

    我有第一個要求,我必須檢查文件是否存在或不在給定的HDFS位置。 如果文件存在,那麼我必須測試大於200字節的文件大小。 基於這兩個結果我必須發送電子郵件通知給用戶。 我可以檢查文件的存在或不與下面的代碼 ${fs:exists("/user/cloudera/trdat/test.txt")} 的幫助下,我可以用下面的代碼 ${fs:fileSize("/user/cloudera/trda

    0熱度

    1回答

    我想運行一個Oozie殼牌行動作業,通過一些子工作流程的配置。 寫入配置文件(workflow.xml),我換一些變量(從job.properties文件來),用單引號,如: <property> <name>myVar</name> <value>'${myVar}'</value> </property> 然而,在shell腳本,參數收到不有任何單引號?有任何想法嗎

    0熱度

    1回答

    我有一個正在執行distcp操作的oozie工作流程。 工作流文件如下: <workflow-app xmlns="uri:oozie:workflow:0.3" name="distcp-wf"> <start to="distcp-node"/> <action name="distcp-node"> <distcp xmlns="uri:oozie:distcp-action:

    0熱度

    1回答

    我正在嘗試使用oozie電子郵件操作發送附件。附件不能正常工作,因爲電子郵件操作 這裏 <email xmlns="uri:oozie:email-action:0.1"> 不支持附件,但 <email xmlns="uri:oozie:email-action:0.2"> 一樣。 問題是,當我們從協調員提交工作流時,它會覆蓋原來的電子郵件動作:0.1版本的內容。我應該如何解決這個問題。

    2熱度

    1回答

    在我的Oozie工作流中,有一個pig動作。 運行時,它正在尋找CDH中的log4j.properties文件,因爲我沒有在我的罐子中提供該文件。 現在,我有我的log4j.properties文件,我只需要在Pig動作中將它作爲JVM選項傳遞。 有沒有辦法做到這一點?

    0熱度

    2回答

    我有3組不同的表。第一組包含3個表格,第二組包含4個表格,第三組包含5個表格。現在我希望所有這3套應該在Oozie工作流程中並行開始(彼此獨立)。 任何人都可以提供相同的示例工作流程。 set1 set2 set3 Job11 job21 job31 job12 job22 job32 job13 job23 job33 job24 jo

    3熱度

    1回答

    我正在運行EMR 5.0羣集,我正在使用HUE創建OOZIE工作流程來提交SPARK 2.0作業。我已經直接在YARN上提交了一個spark-submit作業,並作爲同一個集羣上的一個步驟。沒問題。但是,當我與HUE做到這一點,我得到以下錯誤: java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spa

    1熱度

    1回答

    我試圖運行一個簡單的Oozie作業來使用Sqoop從本地MySQL數據庫中提取數據。下面是我的workflow.xml: <workflow-app name="sqoopoozietest" xmlns="uri:oozie:workflow:0.1"> <start to="sqoopconnect"/> <action name="sqoopconnect"> <sqoop x

    0熱度

    1回答

    我試圖運行azurehdinsight集羣上的Oozie的工作流任務定義是這樣的: <workflow-app xmlns="uri:oozie:workflow:0.2" name="oozie-sqoop"> <start to="sqoop1" /> <action name="sqoop1"> <sqoop xmlns="uri:oozie:sqoop-act