如何修復致命錯誤：內存（分配）（試圖分配字節）在PHP

Question

我讀文件的CSV值：約100MB

//$mypath . '/' . $filename <=> ../abc.csv 
$val = file_get_contents($mypath . '/' . $filename);          

$escaped = pg_escape_bytea($val); 

$model->addFileImport($tmp, $data['email'], $escaped); 

我的文件IA。 在php.ini中設置： memory_limit的= 128M

但它仍然顯示在行errort :Fatal error: Allowed memory size of 8388608 bytes exhausted (tried to allocate 133120 bytes) in...：$val = file_get_contents($mypath . '/' . $filename);

我已經通過固定加ini_set('memory_limit', '-1');：

//$mypath . '/' . $filename <=> ../abc.csv 
ini_set('memory_limit', '-1'); 
$val = file_get_contents($mypath . '/' . $filename);          

$escaped = pg_escape_bytea($val); 

$model->addFileImport($tmp, $data['email'], $escaped); 

但它顯示錯誤：

Fatal error: Out of memory (allocated 230686720) (tried to allocate 657099991 bytes) in C:\wamp\www\joomlandk\components\com_servicemanager\views\i0701\view.html.php on line 112

在第$escaped = pg_escape_bytea($val);

爲什麼？如何解決這個錯誤？

Answer 1

嘗試添加：

ini_set('memory_limit', '700M'); 

Answer 2

根據the doc

pg_escape_bytea() escapes string for bytea datatype. It returns escaped string.

When you SELECT a bytea type, PostgreSQL returns octal byte values prefixed with '\' (e.g. \032). Users are supposed to convert back to binary format manually.

意味着單個輸入字節給出的4個字節，即4倍的初始大小

你需要很多的RAM處理你的文件（也許你的系統不能分配那麼多的內存 - 即使沒有PHP限制）。解決方案是從40MB塊處理它，例如使用fread()和fwrite()函數進行處理。

$val = file_get_contents($mypath . '/' . $filename); 

將需要100MB - 因此下一行需要400 MB，總共500MB。你需要閱讀*的file_get_contents少*，例如在時間FREAD（代替的file_get_contents）

過程與20MB讀取只有20（或40）MB

• 讀20MB的文件* pg_escape_bytea *（總100MB）
• 重複上述過程，直到該文件被完全處理