如何閱讀從URL進行Gz壓縮的CSV文件 - Python

Question

我正在請求一個經過壓縮的csv文件。

如何解壓該文件並將其轉換爲csv對象？

csv_gz_file = get("example.com/filename.csv.gz", headers=csv_headers, timeout=30, stream=True) 

reader = csv.reader(csv_gz_file) 
for row in reader: 
    print row 

它拋出這個，因爲它不是解壓

_csv.Error: line contains NULL byte 

Answer 1

import gzip 
import io 

web_response = requests.get("example.com/filename.csv.gz", headers=csv_headers, 
          timeout=30, stream=True) 
csv_gz_file = web_response.content # Content in bytes from requests.get 
            # See comments below why this is used. 

f = io.BytesIO(csv_gz_file) 
with gzip.GzipFile(fileobj=f) as fh: 
    # Passing a binary file to csv.reader works in PY2 
    reader = csv.reader(fh) 
    for row in reader: 
     print(row) 

通過保存在內存中的GZ數據，使用gzip模塊中提取，然後讀出明文數據到另一個存儲容器最後，與您的讀者一起打開該容器。

我對csv.reader希望得到一個文件句柄或list數據有一點不確定，但我認爲這會起作用。如果不是簡單地做：

reader = csv.reader(csv_content.splitlines()) 

而且應該做的伎倆。