請求模塊等待文檔準備好

Question

我在做網頁抓取。實際上，我在節點中使用request module，現代網站正在使用Angular，EmberJS等較新的框架並生成html。當我用請求加載頁面時，文檔還沒有準備好，所以我只得到javascript代碼而不是HTML代碼。

可能產生超時，然後加載頁面？

Answer 1

的request模塊只是一個HTTP客戶端，它只會讓你從一個特定的URL返回的文本。實現你想要做的一個簡單的方法是用像PhantomJS（https://github.com/sgentle/phantomjs-node）這樣的無頭瀏覽器打開URL，並在評估其內容之前實際執行該頁面。