bulkinsert

1熱度

1回答

想知道結構化表格插入與大容量拷貝之間是否存在性能差異。在我開始實施它之前，任何經驗或想法都可能是高性能的。我正在使用Spring.net進行數據庫層調用。的Sql大容量插入 using (SqlBulkCopy bulkCopy = new SqlBulkCopy(this.connectionstring) { bulkCopy.DestinationTableName = "BulkD

0熱度

2回答

psycopg2在多行插入時忽略重複密鑰違規

我正在執行以下代碼，但偶爾會發生重複密鑰違規，並且整個插入操作都會停止。如何忽略這些錯誤並讓查詢對有效條目執行？代碼： query_data = ','.join(cur.mogrify('(%s,%s)', row) for row in data) insert_q = "INSERT INTO <table> VALUES {0};".format(query_data) try:

0熱度

1回答

處理行時意外的文件結束

將輸入文件複製到空的數據庫表時出現以下錯誤。輸入文件只有56732行，但是我得到的行56733的錯誤： continue * * * * * * * * * * copy table temptable ( abc = c(3), bcao = c(1), cba = c(10), test = c(1)nl ) from 'tempfile' Executing . . .

3熱度

1回答

如何使用SQL Server JDBC批量複製API

我遇到了一些問題，試圖將我的列元數據與SQL Server批量複製API和SQLServerBulkCSVFileRecord映射。只是爲了測試目的，我做了一個表格只包含nvarchar(500)列，並添加這樣的元數據： fileRecord = new SQLServerBulkCSVFileRecord(csvPath, false); for(int i=1; i<=colCount;

0熱度

1回答

批量插入SQL Server

我很好奇，如果任何人都可以建議一個更好的方式來做批量插入。在我目前的工作中，我們構建了作爲變量傳遞給存儲過程的xml字符串，然後創建一個臨時表並插入xml。很多時候我看到一個遊標正在使用哪個我更喜歡如果可能的話 DECLARE @DriverToImport TABLE (DriverId INT NULL DEFAULT (0), IsNew TINYINT NOT NU

0熱度

1回答

BulkInsert：INSERT語句與FOREIGN KEY約束衝突

我有兩個實體：Project和StepImplementation。 StepImplementation對項目表有一個FK。我需要添加一個包含500個步驟的新項目到數據庫。如果我使用一個簡單的EntityFramework - 我沒有問題，但據我在SQL Profiler中的500個步驟，我觀察到500個插入。所以我試圖用一系列EntityFramework.BulkInsert來添加一個新項

0熱度

1回答

OLE DB「BULK」，如何識別發生的地方？

我正在做sql server 2008上的批量操作，我得到OLE DB「BULK」錯誤。我知道這是因爲我的表沒有該文件所在的列，反之亦然。儘管知道發生了什麼，但這並不能幫助我很多。我怎樣才能得到失敗的批量的確切線？或者任何其他提示嘗試快速解決錯誤。謝謝。

0熱度

2回答

SSIS - 插入批量每批有多少行可供選擇？

我正在使用批量插入在SSIS在SQL Server中填充大約10M行的表。我已經搜索了很多關於它，仍然無法找到答案。多少個每批行數我應該選擇嗎？有多少最大插入提交大小我應該選擇嗎？很高興收到每個人的解釋。我測試了它並更改了每批的行數。目前爲止我收到的最好成績是5M。感謝您的幫助！

0熱度

1回答

批量插入加載失敗的SQL Server

我試圖插入一個.csv文件到現有的表。現有的表格有3列，這些是ID（僅在表中分配），學號和組號。在我.csv，我有下面的格式，但我每次插入它時，我得到一個錯誤的大容量加載失敗。數據文件行第1列中出現意外的NULL值。目標列（ID）被定義爲NOT Null。那麼，如何忽略第一列？這是.CSV文件： ID,StudentNumber,GroupNumber ,000,3 ,

0熱度

1回答

彈性搜索：在大型數據集上性能較差

我有7個節點具有2個索引的彈性搜索集羣，並且都具有嵌套的對象映射。我被延遲插入到索引2（通過火花流）。我正在使用批量插入，每個批次需要〜8-12s（〜100k記錄）。 Node Configuration: RAM: 64 GB Core: 48 HDD : 1 TB JVM allocated Memory: 32 GB Marvel Node Status: CPU Usages