如何成功運行Bulk mysql查詢？

Question

我創建一個PHP腳本讀取的成千上萬的數據的Excel工作表&通過插入查詢將所有數據到MySQL數據庫。現在的問題是，Excel表格中的數據已經從數千到數百萬。所以現在運行這個腳本時發生超時。 我想知道沒有超時運行所有查詢的最佳解決方案是什麼？

另外一兩件事，我用這個腳本首先舉辦一個網絡上，它結束了在很少的記錄超時，所以後來我執行這個腳本我的本地WAMP服務器&上它並存儲比主機更多的記錄，但仍然超時。所以如果這個解決方案可以在本地服務器上運行，那將是最好的。

Answer 1

我在腳本中使用此：

ini_set("memory_limit", "-1"); 
set_time_limit(0); 

Answer 2

你總是可以嘗試設置：

ini_set('memory_limit', '-1'); 

[docs]

還是一個more appropriate value

或者，農場多出SQL，或者建立一個cron job啓動腳本中小間隔，直到更新完成...

而且see here，來幫助您SQL更有效，如果你正在運行的插入，也看看LOAD DATA INFILE：

http://dev.mysql.com/doc/refman/5.0/en/insert-speed.html

Answer 3

如果你有幾百萬行的，你可能會使用不正確的工具。

如果可能，我建議使用LOAD DATA INFILE（docs）函數，它可以直接接受csv文件。這樣你就可以完全跳過PHP層的插入。如果你還需要將它添加到數據庫之前處理的文件，你可以嘗試將數據轉換成需要的格式，保存到CSV，然後使用上述功能。