pentaho的複製塊如何處理重複數據？

Question

我試圖通過Pentaho的複製表嚮導將我的MySQL數據庫複製到HANA數據庫。它會自動創建一個工作流程，但如果目標數據庫部分填充，我會感到困惑，那麼它會處理重複的行還是隻是複製它們呢？

Answer 1

複製表嚮導不分析重複項。它只是試圖在目標數據庫中運行一堆插入語句。這是您作爲ETL開發人員的工作，以確保重複數據被過濾掉，或者在目標數據庫上更新。檢查插入/更新步驟。性能當然要低得多，因爲每一行都將首先執行數據庫查找，並根據查找結果發佈插入或更新。