將大數據文件導入熊貓

Question

我有一個1.5 GB的.dat文件，需要導入爲熊貓數據框，我遇到了內存問題（8GB RAM）。如何將dat文件分解成塊以執行分析？

Answer 1

pd.read_csv('file.csv', chunksize = x) 

返回迭代給予從file.csvx線一次。