Postgres SQL狀態：54000當將數據複製到表

Question

我正在複製一批csv文件到一個表，每個> 8M行，〜900MB。第一個文件複製得很好，但下一個文件給了我那個錯誤。

從谷歌的唯一相關的結果是從官方文檔相當無助線：

54000 program_limit_exceeded 

這是什麼「程序限制」，如何改變呢？

Answer 1

由於還有另一個缺少引號的大文件，我又得到了這個錯誤。在這裏發佈我的解決方案以防萬一，儘管我認爲還有更多的一般情況會導致這個錯誤。

在R：

library(data.table) 
library(stringi) 

df<-fread("datafile.csv", sep = "@") 
names(df) <- "col1" 

df[,count:=stri_count(col1, fixed = '"')] 
which(df$count%%2!=0) 

的想法是找到（在這種情況下@），從來沒有發生在你的文件中的符號並用其作爲分隔符所以每行被解讀爲一列。然後計算每行的引號數並打印所有具有奇數引號的行號。然後，您可以應用所需的任何修復。