合併自動增量表數據

Question

我有多個最終用戶mySQL數據庫，其數據量相當大，必須與由外部數據源填充的數據庫（也是mySQL）同步。最終用戶可以將數據添加到他們的「本地」數據庫，但不會添加到數據源。

問題是如何合併/同步兩個數據庫，包括數據庫表之間的外鍵，而不會覆蓋「本地」添加項或更改本地添加項的鍵。

事情我已經考慮包括使用飼料DB的CSV轉儲和做與IGNORE一個LOAD DATA INFILE，然後就比較文件，查看從飼料行沒有被寫入，並手工編寫和寫作一些腳本逐行通過饋送數據庫並在本地數據庫中創建新行，同時創建新的密鑰。但是，這似乎可能會非常緩慢，特別是對於多個dbs。

對此有何看法？如果有一種合併這些數據庫的方法，以一種簡單和快速的方式保存密鑰，這將是理想的。

Answer 1

一種選擇是使用GUID而不是整數鍵，但做出如此重大的改變可能不切實際。

假設你只是從中央「feed」數據庫更新用戶數據庫，我會使用CSV和LOAD INFILE，但加載到目標數據庫中的臨時表中。然後，您可以用新值替換這些鍵，最後將行插入永久表中。

如果您不處理大量數據，它可能很簡單，只需找到現有數據的最高ID和傳入數據的最低ID之間的差異即可。將此數量添加到傳入數據中的所有密鑰，並且不應有衝突。這會浪費一些PK值，但這可能不值得擔心，除非你的記錄數量在數百萬。這假定你的PK是整數和順序的。

Answer 2

使用複合主鍵。

主鍵（id，SOURCE_ID）

使每個DB使用不同的值SOURCE_ID。這樣你可以複製數據庫內容而不會發生PK衝突。