Shell腳本下載所有網頁？

Question

我想從網站下載一系列頁面。

的URL將格式爲：http://example.com/x其中x可以來自任何100向number200。

是否有任何可能的腳本可用於下載所有頁面，範圍從example.com/100到example.com/200？

Answer 1

for x in {100..200}; do 
    wget "http://example.com/$x" 
done 

Answer 2

如果您已經安裝curl，您可能需要使用相對高效的方式如下：

curl -O 'http://example.com/[100-200]' 

（是的，我知道，curl是真的很酷！）。

Answer 3

更快的版本不冒險與突破更復雜的URL不正確引用：

for x in {100..200}; do 
    wget 'http://example.com/'"$x" & 
done 
wait