從文件中獲取uniq隨機行，並將它們寫入另一個文件，使用php

Question

我有文件包含10000個不同的行。我需要從這個文件中取出100個隨機uniq行並將它們寫入另一個文件。什麼是最簡單的方法來使用PHP？

Answer 1

一個天真方式：

$lines = file('somefile.txt'); 
shuffle($lines); 
$random_lines = array_slice($lines, 0, 10); 

注：這完全忽視了系統資源的考慮。

Answer 2

一個更快的解決方案大線

function m1($file) { 
    $fp = fopen($file, "r"); 
    $size = filesize($file); 
    $list = array(); 
    $n = 0; 
    while (true) { 
     fseek($fp, mt_rand(0, $size)); 
     fgets($fp); 
     $pos = ftell($fp); 
     isset($list[$pos]) or $s = trim(fgets($fp)) and $list[$pos] = $s and $n ++; 
     if ($n >= 100) 
      break; 
    } 
    return $list; 
} 



function m2($file) { 
    $lines = file($file); 
    shuffle($lines); 
    $list = array_slice($lines, 0, 100); 
    return $list; 
} 

簡單的基準與接受的解決方案

10000行

Array 
(
    [m1] => 0.013591051101685 <------ M1 Faster 
    [m2] => 0.033689975738525 
) 

100000號線

Array 
(
    [m1] => 0.014040946960449 <------ M1 Faster 
    [m2] => 0.094476938247681 
) 

Full Benchmark Code

File Used