如何從PostgreSQL數據庫中的文本文件加載數據？

Question

我有一個像（CSV文件）的文件：

value1|value2|value2.... 

value1|value2|value2.... 

value1|value2|value2.... 

value1|value2|value2.... 

，並希望將這些數據加載到PostgreSQL表。

Answer 1

的下面略爲修改的COPY版本對我來說效果更好，我指定了CSV格式。這種格式不用大驚小怪地處理文本中的反斜槓字符。默認格式是有點古怪TEXT。

COPY myTable FROM '/path/to/file/on/server' (FORMAT CSV, DELIMITER('|')); 

Answer 2

退房的Postgres的COPY命令：

http://www.postgresql.org/docs/current/static/sql-copy.html

Answer 3

讓我們考慮你的數據在文件values.txt和要導入數據庫表myTable然後下面的查詢做工作

COPY myTable FROM 'value.txt' (DELIMITER('|')); 

https://www.postgresql.org/docs/current/static/sql-copy.html

Answer 4

有Pgloader使用上述COPY命令並且能夠從加載CSV數據（和MySQL，SQLite和dBase的）。它還使用單獨的線程來讀取和複製數據，所以速度非常快（有趣的是，它是從Python寫入Common Lisp並獲得了20至30倍的速度增益，請參閱blog post）。

要加載CSV文件一個需要寫一個小的配置文件，如

LOAD CSV 
    FROM 'path/to/file.csv' (x, y, a, b, c, d) 
    INTO postgresql:///pgloader?csv (a, b, d, c) 
    …