如何高效地將數百萬條記錄從.NET流式傳輸到SQL Server

Question

我有一個C＃.NET程序，每次處理數百萬條記錄，然後將它們存儲在平面文件或SQL Server數據庫中。

當前，要將它們存儲在SQL Server數據庫中，程序會將所有記錄寫入平面文件，然後使用bcp將其導入到SQL Server中。

有沒有一種更有效的方法，可以繞過在導入SQL之前將每條記錄寫入硬盤的需求？

Answer 1

考慮在System.Data.SqlClient名稱空間中使用SqlBulkCopy類。您可以使用它像這樣：

using (var conn = new SqlConnection(connectionString)) 
using (var bulkCopy = new SqlBulkCopy(conn)) 
{ 
    conn.Open(); 
    { 
     bulkCopy.DestinationTableName = "dbo.MyTable"; 
     DataTable dt = BuildMyData(); 
     try 
     { 
      bulkCopy.WriteToServer(dt); 
     } 
     catch (Exception ex){Console.WriteLine(ex.Message);} 
    } 
} 

的WriteToServer方法重載，將接受3種不同PARAM數據類型：

• DataRow[]
• DataTable
• IDataReader