我在Azure「數據工廠」中設置管道,用於從存儲中獲取平面文件並將它們加載到Azure SQL DB中的表中。瞭解Azure數據工廠管道中的開始和結束時間
此管道的模板指定我需要一個開始和結束時間,其中the tutorial表示設置爲1天。
我想了解這一點。如果它是Linux中的CRON任務或Windows Server中的計劃任務,那麼我只是簡單地告訴它何時開始(即每天早上6點),並且需要很長時間才能完成。
這導致我的幾個相關問題:
- 爲什麼我需要指定的結束時間?
- 如果我不知道運行需要多長時間會怎樣?
- 如果我將來設置得太遠,是否會冒數據管道未能及時完成的風險?
- 如果我設置得太快,管道是否會中斷?
- 爲什麼硬編碼的日期,而不是一個頻率(即它說,使用這種格式 - 「2014-10-14T16:32:41Z」)
我發現a prior question它揭示了一點說明如何做頻率而不是硬編碼的日期,但是我的問題仍然沒有得到解決。
嗨@Sonia,有關如何更改數據工廠中的時區的任何想法?它目前基於UTC。 – Ariox66
我認爲這裏缺少的關鍵是:當你指定開始和結束時間和時間表時,它會預先生成一個大的「時間片」列表。所以如果你每天的日程安排爲3年,它將產生3 X 365時間片條目。你可以去處理那些特定的時間片。如果您想在過去運行帶'timeslice參數'的作業,您會發現它是時間片並運行它。如果你想在未來運行一個來測試它...運氣不好我無法得到這個工作(雖然我還在學習) –