2017-10-13 34 views
0

我們正試圖從Pentaho Kettle轉移到Apache AIrflow來執行ETL,並將所有數據流程集中到1個工具下。使用Airflow將數據從Postgres/MySQL移動到S3

我們使用水壺從Postgres/Mysql數據庫每日讀取數據,並將數據移至S3 - > Redshift。

這樣做最簡單的方法是什麼?我沒有看到運營商可以直接做到這一點;所以我應該使用MySQL/Postgres運算符將數據放入本地文件中,並使用S3運算符將數據移至S3?

謝謝

回答