如何計算非常大的數據集發生與PHP

Question

比方說，我想跟蹤的時候出現一個詞數...

//Update the totals 
foreach($arrayOfWords as $word) { 
    $totals[$word] = $totals[$word] + 1; 
} 

現在，想象一下，認爲這個代碼的小塊被稱爲數百次，每次每次在$ arrayWords中有數千個新單詞，導致數百萬條目在關聯數組$ total中。儘管操作很簡單（將現有值加1），但當我們接近數百萬個條目時，PHP速度顯着下降。

你可以想一個更好的方法來統計事件（最好不使用數據庫）嗎？

Answer 1

下面就來加快它

//Update the totals 
foreach($arrayOfWords as $word) { 
    $totals[$word]++; 
} 

無需搜索相同關鍵字的散列內連續兩次只是爲了增加其價值的一種方式。另外，（只是一個筆記）我看不出$totals的長度如何超過$arrayOfWords的長度，除非您在代碼中的其他位置添加單詞$totals。

Answer 2

結合的Mark Baker和quickshiftin的建議，下面的代碼應該是相當快一點，如果輸入的單詞列表包含了許多重複的話：

$counts = array_count_values($words); 
foreach($counts as $word => $count) { 
    $totals[$word] += $count; 
} 

這就是說，在任何情況下，PHP可能不是這種海量數據處理的最佳工具。但是，如果不知道更多關於爲什麼您想要這樣做，很難建議具體的替代方案。