在Node.js/Express中，如何「下載」頁面並獲取其HTML？

Question

在代碼中，我想下載「http://www.google.com」並將其存儲在字符串中。 我知道如何在python中的urllib中做到這一點。但是，您如何在Node.JS + Express中執行此操作？

Answer 1

如何使用Node.js，你可以只使用http.request方法

http://nodejs.org/docs/v0.4.7/api/all.html#http.request

這種方法被內置到你只需要爲需要HTTP節點。

如果你只想做一個GET，那麼你可以使用http.get

http://nodejs.org/docs/v0.4.7/api/all.html#http.get

var options = { 
    host: 'www.google.com', 
    port: 80, 
    path: '/index.html' 
}; 

http.get(options, function(res) { 
    console.log("Got response: " + res.statusCode); 
}).on('error', function(e) { 
    console.log("Got error: " + e.message); 
}); 

（node.js的從實例文檔）

你也可以使用mikeal的要求模塊

https://github.com/mikeal/request

Answer 2

var util = require("util"), 
    http = require("http"); 

var options = { 
    host: "www.google.com", 
    port: 80, 
    path: "/" 
}; 

var content = ""; 

var req = http.request(options, function(res) { 
    res.setEncoding("utf8"); 
    res.on("data", function (chunk) { 
     content += chunk; 
    }); 

    res.on("end", function() { 
     util.log(content); 
    }); 
}); 

req.end();