2016-07-17 34 views
1

我想定期更新Redshift與火花紅移連接器(斯卡拉)。 每個更新都以刪除操作開始。 (我正在執行一種Upsert到Redshift)火花紅移連接器:結合保存到紅移刪除查詢

有沒有一種方法可以執行它與庫? 它可以與交易?

任何意見將不勝感激。

謝謝, 伊蘭。

回答

1

它似乎有一個選項,稱爲「預製」(和「postactions」),它會伎倆。

看到文檔: https://github.com/databricks/spark-redshift

+0

可以共享此參考工作的例子嗎?我不需要將火花數據框發送到Redshift的着陸區域,以便有條件地刪除upsert?說:----------- '''使用test_1從test_2中刪除where test_2.a = test_1.a and test_2.b = test1.b''' -----我們需要在redshift中有test_1和test_2 ----預先操作如何幫助這裏? – user1652054