最快最有效的方法來運行一個循環來查找和驗證超過100萬用戶名關閉不同的網站？

Question

使用PHP的當前腳本確實有效，但顯然它需要很長時間，因爲有超過100萬的用戶名需要驗證。

這將檢查外部網站API並返回<span class="user">{userID}</span>如果它是有效的用戶名，並且返回<span class="user">0</span>如果不是。

$query = $db->query('SELECT id, username FROM users_to_verify'); // Over 1 million. 
    foreach($query as $row) { 
    $userID = $row['id']; 
    $userName = $row['username']; 
    if(!preg_match("/<span class=\"user\">0<\/span>/", file_get_contents("http://website.net/api.php?userName=".$userName))) 
      $db->query('UPDATE users_to_verify SET verified = 1 WHERE id = $userID'); 
     } 
    } 

這是最快的方法嗎？我也嘗試過使用cURL，但file_get_contents和cURL似乎都具有相同的性能，我也知道其中的一些將依賴於外部網站的響應時間，但我想確保我的方面使用最快，最好的辦法可能。

Answer 1

我不知道file_get_contentes和cUrl的表現。但是你可以運行所有查詢在一個命令提高你的速度：

$query = $db->query('SELECT id, username FROM users_to_verify'); // Over 1 million. 
$update_query = []; 
foreach($query as $row) { 
$userID = $row['id']; 
$userName = $row['username']; 
if(!preg_match("/<span class=\"user\">0<\/span>/", file_get_contents("http://website.net/api.php?userName=".$userName))) 
     $update_query[] = 'UPDATE users_to_verify SET verified = 1 WHERE id = $userID'; 
    } 
} 
$db->query(implode(';',$update_query)); 

在這種情況下，你不必連接並在循環的每一步運行查詢。

編輯：

它甚至會更好，只收集驗證的用戶id，然後使用WHERE id IN(implode(',', $userIds))。所以MySQL只需要處理一個查詢。

$query = $db->query('SELECT id, username FROM users_to_verify'); // Over 1 million. 
$userIDs = []; 
foreach($query as $row) { 
$userID = $row['id']; 
$userName = $row['username']; 
if(!preg_match("/<span class=\"user\">0<\/span>/", file_get_contents("http://website.net/api.php?userName=".$userName))) 
     $userIDs[] = $userID; 
    } 
} 
$db->query('UPDATE users_to_verify SET verified = 1 WHERE id IN('.implode(',', $userIDs).')'); 

Answer 2

你可以做到這一點不使用循環，而該網站是開放的，嘗試在後臺做這件事，讓PHP做的工作像一個cron作業的背景。

檢查了這一點： http://code.tutsplus.com/tutorials/managing-cron-jobs-with-php--net-19428