給定url字符串，我如何儘可能快地將所有字節讀入內存？

Question

大家都給出了url字符串，我想盡可能快地將所有的字節（最多指定的數字n）讀入內存。

我想知道這個問題最好的解決方案是什麼？

我已經想出了兩種解決方案，但是因爲互聯網連接是永遠不變，這是不可能的時間方法，看看哪個更省時高效，所以我是通過右鍵，不知道這這兩個功能應該更省時？ ：

public static int GetBytes(String url, byte[] destination) throws Exception { 
    //read all bytes (up to destination.length) into destination starting from offset 0 
    java.io.InputStream input_stream = new java.net.URL(url).openStream(); 
    int total_bytes_read = 0; 
    int ubound = destination.length - 1; 
    while (true) { 
     int data = input_stream.read(); 
     if (data == -1) { 
      break; 
     } 
     destination[total_bytes_read] =(byte) data; 
     if (total_bytes_read == ubound) { 
      break; 
     } 
     ++total_bytes_read; 
    } 
    input_stream.close(); 
    return total_bytes_read; 
} 

public static int GetBytes2(String url, byte[] destination) throws Exception { 
    //read all bytes (up to destination.length) into destination starting from offset 0 
    java.io.InputStream input_stream = new java.net.URL(url).openStream(); 
    int total_bytes_read = 0; 
    while (true) { 
     int bytes_to_read = destination.length - total_bytes_read; 
     if (bytes_to_read == 0) { 
      break; 
     } 
     int bytes_read = input_stream.read(destination, total_bytes_read, bytes_to_read); 
     if (bytes_read == -1) { 
      break; 
     } 
     total_bytes_read += bytes_read; 
    } 
    input_stream.close(); 
    return total_bytes_read; 
} 

測試代碼：

public final class Test { 

    public static void main(String args[]) throws Exception { 
     String url = "http://en.wikipedia.org/wiki/August_2010_in_sports"; // a really huuge page 
     byte[] destination = new byte[3000000]; 
     long a = System.nanoTime(); 
     int bytes_read = GetBytes(url, destination); 
     long b = System.nanoTime(); 
     System.out.println((b - a)/1000000d); 
    } 
} 

我從我的測試代碼了，結果是這樣的：

GetBytes: 

12550.803514 
12579.65927 
12630.308032 
12376.435205 
12903.350407 
12637.59136 
12671.536975 
12503.170865 

GetBytes2: 

12866.636589 
12372.011314 
12505.079466 
12514.486199 
12380.704728 
19126.36572 
12294.946634 
12613.454368 

基本上，我想知道是否有人知道一個更好的方式來閱讀所有字節從一個網址到內存使用盡可能少的時間？

Answer 1

我會建議你使用JSOUP java的HTML解析器。我用你的代碼使用JSOUP PARSER嘗試了你給定的URL。所花費的時間約爲所花時間的1/4。

 long a = System.nanoTime(); 
     Document doc = Jsoup.connect("http://en.wikipedia.org/wiki/August_2010_in_sports").get(); 
     String title = doc.title(); 
    // System.out.println(doc.html()); // will print whole html code 
     System.out.println(title); 
     long b = System.nanoTime(); 
     System.out.println("Time Taken " + (b - a)/1000000d); 

輸出：

August 2010 in sports - Wikipedia, the free encyclopedia 
Time Taken 3842.634244 

試試這個。您需要下載JAR files以使用JSOUP。

Answer 2

您一次讀取的字節越多，讀取的速度就越快。每次read（）調用都會輪詢您的輸入設備，並在重複執行時產生大量開銷。 GetBytes2（）比GetBytes（）快。線程也可能會增加您的讀取速度，但最佳解決方案是優化您的算法。