使用wget下載文件

Question

我需要從網頁下載適合的文件。我使用-i選項的wget這樣做：我下載的文件存儲在其中包含URL1，URL2一個LIST.TXT文件...然後

$ wget -i list.txt 

你知道，如果有做的可能性同樣的事情使用python腳本？ 謝謝。

Answer 1

假設你的文件包含每行一個網址，你可以這樣做：

import urllib2 
with open('list.txt') as my_list: 
    for line in my_list: 
     response = urllib2.urlopen(line) 
     html = response.read() 
     # now process the page's source 

Answer 2

with open('list.txt') as my_list: 
    for url in my_list: 
     wget.download(url)